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Abstract 



Three steps in the development of the maximum likehhood (ML) method are presented. At first, 
the application of the ML method and Fisher information notion in the model selection analysis is 
described (Chapter 1). The fundamentals of differential geometry in the construction of the statistical 
space are introduced, illustrated also by examples of the estimation of the exponential models. 
At second, the notions of the relative entropy and the information channel capacity are introduced 
(Chapter 2). The observed and expected structural information principle (IP) and the variational IP 
of the modified extremal physical information (EPI) method of Frieden and Soffer are presented and 
discussed (Chapter 3). The derivation of the structural IP based on the analyticity of the logarithm of 
the likelihood function and on the metricity of the statistical space of the system is given. 
At third, the use of the EPI method is developed (Chapters 4-5). The information channel capacity 
is used for the field theory models classification. Next, the modified Frieden and Soffer EPI method, 
ujhich is a nonparametric estimation that enables the statistical selection of the equation of motions of 
various field theory models (Chapter 4) or the distribution generating equations of statistical physics 
models (Chapter 5) is discussed. The connection betiueen entanglement of the momentum degrees of 
freedom and the mass of a particle is analyzed. The connection betujeen the Rao-Cramer inequality, 
the causality property of the processes in the Minkowski space-time and the nonexistence of tachions 
is shoujn. The generalization of the Aoki-Yoshikauja sectoral productivity econophysical model is also 
presented (Chapter 5). Finally, the Frieden EPI method of the analysis of the EPR-Bhom experiment is 
presented. It differs from the Frieden approach by the use of the information geometry methods. This 
ujork is destined mainly for students in physics and econophysics. (At present only Polish version is 
available). 
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Wst^p 



Tematem skryptu jest metoda najiui^kszej luiarygodnosci (MNW) oraz informacja Fishera (IF) w 
fizyce i statystyce. Problem dotyczy bardzo aktualnego sposobu konstrukcji modeli fizycznych, ktory 
luytuodzi si^ ze statystycznego opisu zjaxuisk, ktorego formalizm pozujala na opis caiego spektrum 
roznych teorii pola, klasycznych i ktuantoiuych. Kluczoiue uj tym podejsciu poj^cie (oczekiujanej) IF 
ujproujadzii Fisher na gruncie ruiasnych rozruazah zrui^zanych z oszacoujyujaniem parametroru mo- 
deli, podlegajqcych badaniu statystycznemu in ramach ogolnej metody ekstremalnej ruartosci funkcji 
ruiarygodnosci L. IF opisuje lokalne ruiasnosci funkcji luiarygodnosci L = P{y\@), ktora formal- 
nie jest iqcznym prarudopodobieristujem (lub iqcznq g^stosci^ praiudopodobiehstiua) danych y, lecz 
jest rozumiana jako funkcja zbioru parametrouj G, ktory z kolei tujorzy ujspoirz^dne u; przestrzeni 
statystycznej. Analiza statystyczna modeli fizycznych idzie jak dotqd dujoma nurtami. 

Pierujszy z nich, geometryczny, probuje opisac metody statystycznq ujproujadzonq u; latach 20 
poprzedniego ujieku przez Fishera [1], tujorc^ podstauj techniki statystycznej otrzymyujania dobrych 
estymatorouj MNW, uj jak si^ okazaio naturalnym dla niej srodouiisku geometrii rozniczkoujej. Roz- 
ujijajqc MNW, juz ui 1945 roku C.R. Rao [2] zauiuazyi, ze macierz informacji Fishera okresla metryk^ 
Riemanna i badai struktur^ modeli statystycznych z punktu ujiedzenia geometrii Riemanoujskiej. Z 
kolei B. Efron [3] badajqc jednoparametrouje modele i analizujqc ich asymptotyczne ujiasnosci dla pro- 
cedur estymacyjnych, ujproujadzii i odkryi uzytecznosc poj^cia statystycznej krzyujizny. A.P. Daujid 
[4] ujproujadzii poj^cie koneksji na przestrzeni ujszystkich dodatnio okreslonych rozkladouj prauj- 
dopodobiehsttua, pokazujqc, ze ze ujzgl^du na tq koneksji statystyczna krzyujizna jest krzyujiznq ze- 
ujn^trznq. Jednak problemem Datuida byi nieskoiiczony ujymiar przestrzeni rozkiadouj. W roku 1980 
S. Amari [5] opublikoujai systematyczne uj^cie teorii Daujida dla modeli skohczenie tuymiaroujych 
i podai spojne okreslenie a-koneksji (ujproujadzonej ujczesniej poza kontekstem statystycznej esty- 
macji przez N.N. Chentsova). W 1982 S. Amari ujraz z H. Nagaoka [6] ujykazali dualnosc piaskich 
przestrzeni modeli eksponencjalnych z e-koneksjq i modeli mieszanych z m-koneksjq. 
Procedury estymacyjne statystycznego opisu mechaniki kujantoujej (faloujej) posziy duJoma drogami. 
Pierujsza z nich zujiqzana jest z naturalnym dla mechaniki kujantoujej formalizmem macierzy g^stosci, 
druga z konstrukcjq zasad informacyjnych (entropijnych). W przypadku formalizmu macierzy g^sto- 
sci, ich zbior S = IJr=i '^r i'^r U Si = (i, i r) dla przypadku skohczenie ujymiaroujych przestrzeni 
Hilberta H, tuJorzy zbior ujypukiy. Dla stanouj czystych, podzbior 5i tego zbioru tujorzq punkty eks- 
tremalne, a przestrzeh stanouj czystych zujiqzana z nim moze bye utozsamiona z zespolonq przestrze- 
niq rzutoujq CP^^^, {k = dim Ti). Na przestrzeni tej mozna tuproujadzic (z dokiadnosciq do staiej) 
metryk^ Riemannoujskq nazyujanq metrykq Fubiniego-Study, ktora jest kujantoujq ujersjq metryki 
Rao-Fishera. Statystycznq estymacjq uj modelach dla stanouj czystych zajmoujali si^ mi^dzy innymi 
Fujiujara, Nagaoka i Matsumoto [7]. Natomiast uj przypadku podzbioru Sk zbioru S dualna struktura 
z metrykq mozne bye traktoujana jako kujantoujy analog metryki Rao-Fishera z zba-koneksjq. 
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Drugim nurtem, ktory ujyionii si^ u; ostatnich kilkunastu latach i ktorym szedi roztuoj zastoso- 
ujan MNW oraz poj^cia obserujoujanej i oczekituanej IF lu fizyce jest formalizm ekstremalnej fizycznej 
informacji (EFI) opracotuany przez Friedena i jego ujspoipracotunikoiu, uj szczegolnosci Soffera [8]. 
Konstrukcj^ modeli fizycznych z luykorzystaniem informacji Fishera zapoczqtkoiual Frieden, podajqc 
metod^ luyproiuadzenia z informacji Fishera czionu kinetycznego modeli fizycznych. Nast^pnie zapo- 
stuloujai ujproujadzenie dujoch zasad informacyjnych siuzqcych do ustalenia zujiqzku pomi^dzy po- 
jemnosciq kanaiu informacyjnego / oraz informacji strukturalnq Q, tzn. poprzez zapostuloujanq noujq 
strukturalnq zasad^ informacyjnq skonstruoujai on cziony strukturalne rozujazanych przez siebie mo- 
deli. W odroznieniu od Friedena stosujemy jednak inne [9], bardziej fizyczne a mniej informacyjne, 
podejscie do konstrukcji podstaujoujych zasad informacyjnych, posiugujqc si^ poj^ciem caikoiuitej 
fizycznej informacji K = I+Q, a nie ujprouiadzonym przez Friedena poj^ciem zmiany fizycznej infor- 
macji. Roznica ta, chociaz nie poujoduje zasadniczo rachunkoujych zmian u; sposobie ujyproujadzenia 
roujnah ruchu bqdz roujnah generujqcych rozkiad dla rozujazanych do tej pory problemouj, jednak 
zmieniajqc poj^cie informacji fizycznej oraz jej rozkiadu na kinetyczne i strukturalne stopnie sujobody, 
idzie UJ linii protuadzonych ostatnio badah nad konstrukcji zasady ekujipartycji dla entropii. To inne 
niz Friedenoujskie podejscie do poj^cia fizycznej informacji poiuoduje rotuniez zmiany w pojmotuaniu 
istoty przekazu informacji uj procesie pomiaru przy jej przekazie od strukturalnych do kinetycznych 
stopni sujobody. Pomimo roznic samq metod^ b^dziemy dalej nazyujac podejsciem Friedenoujskim. 
Gdyby pominqc chujiloujo proces pomiaru, uj metodzie Friedena probkoujanie przestrzeni jest ujy- 
konyujane przez ukiad, ktory poprzez ujiasciuje dla niego pole (i zujiqzane z nim amplitudy) o randze 

b^dqcej ujielkosciq proby, probkuje jego kinetycznymi (Fisheroujskimi) stopniami sujobody do- 
st^pnq mu przestrzeh konfiguracyjnq. Nast^pnie, ponietuaz IF jest infinitezymalnym typem entropii 
Kulbacka-Leiblera, to zauujazajqc, ze entropia Kulbacka-Leiblera jest ujykorzystyujana uj statystyce do 
przeproujadzania testouj ujyboru modeli, pojaujia si^ przypuszczenie, ze IF moze poprzez narzucenie 
na niq odpoujiednich dodatkoujych ograniczeh, zapostuloujanych uj postaci ujspomnianych duJOch 
zasad informacyjnych, ujariacyjnej (skalarnej) oraz strukturalnej (ujeujn^trznej), doproujadzic do xuy- 
proujadzenia roujnah ruchu bqdz roujnah stanu ukiadouj fizycznych, najlepszych z punktu ujidzenia 
oujych informacyjnych zasad. Na tym zasadza si^ Friedenoujska idea estymacji fizycznych modeli. 

Zasady informacyjne majq uniujersalnq postac, jednak ich konkretne realizacje zalezq od fizyki 
rozujazanego zagadnienia. Pierujsza z zasad informacyjnych, strukturalna, opisuje ujeujn^trzne cha- 
rakterystyki ukladu zuji^zane np. z jego spinem. Druga, ujariacyjna, proujadzi do otrzymania ujia- 
scituej relacji dyspersyjnej dla ukiadu. Ciekatu^ spratu^ jest, ze ujiele rachunkouj mozna ujykonac 
dla przypadku, dla ktorego caikotuita fizyczna informacja ukiadu (oraz jej g^stosc) dzieli si^ na dujie 
rotune (lub z czynnikiem 1/2) cz^sci, tzn. pojemnosc kanaiu informacyjnego oraz informacji struk- 
turalnq, maj^c sujojq caikoujitq ujartosc rouinq zero. Frieden podai informacyjne ujyproujadzenie 
roujnania Kleina-Gordona dla ogolnego modelu pola z rangq A^, z szczegolnym uujzgl^dnieniem przy- 
padku pola skalarnego z N=2. Dla pola spinoroujego z A^=8 otrzymai roujnanie Diraca a dla A^=4 
roiunania Maxujella. Procedura jest na tyle ogolna, ze umozliujia opis pol Rarity-Schujingera, ogol- 
nej teorii uizgl^dnosci oraz ujproiuadzenie transformacji cechoujania [8]. W oparciu o ujproujadzone 
zasady informacyjne Frieden podai roujniez informacyjne ujyproujadzenie zasady nieoznaczonosci 
Heisenberga oparte ze statystycznego punktu ujidzenia o tujierdzenie Rao-Cramera dla informacji Fi- 
shera oraz jej relacji z pojemnosciq informacyjne ukiadu zapisanq uj reprezentacji p^doujej, czyli po 
dokonaniu transformacji Fouriera. Transformacja Fouriera peini zresztq uj caiym formalizmie Friede- 
noujskim rol^ ujyjqtkoujq, b^dqc jednym z typouj samosplqtania ujetunqtrz przestrzeni konfiguracyjnej 
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ukiadu, o czym luspomnimy nieco ponizej. Frieden podai romniez tuyproiuadzenie klasycznej fizyki 
statystycznej, tzn. jej podstaujoujych rozkiadouj, Boltzmanna dla energii oraz Maxujella-Boltzmanna 
dla p^du jak rotuniez peujnych rozkiadotu, ktore zinterpretotuai jako odpoujiadaj^ce przypadkom 
nieroujnotuagoiuym. Kolejnq spraiuq byio tuyprotuadzenie gornego ograniczenia na tempo zmiany 
entropii ukiadu dla przykiadouj klasycznego strumienia czqstek, g^stosci rozkiadu iadunku, cztero- 
potencjaiu elektrodynamicznego oraz strumienia czqstek o spinie 1/2 [8]. Podai roujniez opis teorii 
pomiaru z szumem ujykorzystujqc ujariacyjny formalizm EFI pozujalajqcy na opis redukcji funkcji fa- 
loujej tu trakcie pomiaru urzqdzeniem dajqcym sujoj ujiasny szum. Mianoujicie po dokonaniu ekstre- 
malizacji sumy informacji fizycznej K niemierzonego ukiadu oraz funkcjonaiu opisujqcego xuiasnosci 
ukiadu pomiaroiuego (a b^dqcego splotem funkcji log-ujiarygodnosci dla funkcji przyrzqdu splecionej 
nielinioiuo z rozkiadem ukiadu), otrzymai roiunanie ruchu, ktore (po przejsciu do nierelatyujistycznej 
granicy Schrodingera) daje roujnanie typu Feynmana-Mensky'ego z nielinioujym czionem opisujq- 
cym kolaps funkcji faloujej uj pomiarze. Ciekauje jest to, ze uj tym przypadku uj peini ujaujnia si^ 
traktoujanie czasu na roujni ze zmiennymi przestrzennymi, czyli jako zmiennej losoujej z rozkiadem 
praujdopodobienstuia. Przedstaujiona uj skrypcie postac zasad informacyjnycti [10] daje formalnie 
te same roujnania eujolucji funkcji faloiuej ukiadu opiecionej funkcjq pomiarotu^ przyrzqdu, jednak 
otrzymana interpretacja jest zdecydoujanie bardziej spojna niz Friedenoujska, pozujalajqc na jedno- 
znaczne rozroznienie ukiadu poza pomiarem od ukiadu uj pomiarze. 

Przedstaujione uj skrypcie, fundamentalna postac obserwowanej strukturalnej zasady informacyjnej 
oraz jej postac oczekiwana, [9, 10], ujykorzystyujane za Friedenem dla kazdego omaujianego pro- 
blemu, zostaiy ostatnio ujyproujadzone dla luartosci tzuj. ujspoiczynnika efektytunosci k = 1 [10]. 
Zasada strukturalna sugeruje splqtanie przestrzeni danych obserujoxuanych z nieobserujoujanq prze- 
strzeniq konfiguracyjnq ukiadu [10]. Zatem informacja strukturalna Q [10] reprezentuje roujniez in- 
formacji o splqtaniu ujidocznym uj korelacji danych uj przestrzeni pomiaroujej, a EFI moze bye ujy- 
korzystyujana jako mechanizm uj estymacji stanouj splqtanych. Np. uj przypadku problemu EPR- 
Bohma, splatanie zachodzi pomi^dzy rzutem spinu obserujoujanej czqstki i nieobserujoujanq konfigu- 
racjq i^cznq ukiadu, a uj przypadku relatyujistycznych roujnah ruchu otrzymujemy splqtanie kine- 
tycznych i strukturalnych (masa) stopni sujobody, czego ujyrazem jest zujiqzek stanu obserujoujanej 
czqstki UJ czasoprzestrzeni z jej ujiasnym stanem uj przestrzeni energetyczno-p^doujej. Ten drugi przy- 
padek jest przykiadem ujspomnianego samosplqtania opisanego transformatq Fouriera. Ponieujaz Q 
zujiqzane jest tu z masq czqstki, zatem uj podejsciu informacyjnym mozna ujyciqgnqc roujniez ujnio- 
sek, ze samosplqtanie poujinno pomoc uj odczytaniu struktury ujeujn^trznej cz^stek. W koricu poj^cie 
informacji Fishera i jej reinterpretacja przez Friedena jako czionu kinetycznego teorii, pozujoHia na 
przeproujadzenie informacyjnego doujodu [9] o nieujyproujadzalnosci mechaniki kujantotuej (faloiuej) 
oraz kazdej teorii pola, dla ktorej ranga pola jest skohczona, z mechaniki klasycznej. 

Temat skryptu dotyczy uji^c fundamentalnego zagadnienia zujiqzanego z okresleniem statystycz- 
nej procedury estymacji modeli fizycznych. Jego realizacja ujymaga znajomosci problemouj zujiq- 
zanych z stosoiuaniem statystycznej MNW oraz fizycznej EFI dla konstrukcji modeli fizycznych, jak 
roujniez podstauj metod geometrii rozniczkoujej. 

Na koniec uujaga sioujnikouja i podsumoujanie tresci metody EFI. Poj^cie "likelihood function" zostaio 
ujproujadzony przez Fishera jako majqce zujiqzek z praujdopodobiehstujem. Roujniez sioujnikoujo po- 
ujinno bye ono przetiumaczone jako "funkcja mozliujosci". Zastosoujano jednak tiumaczenie "funkcja 
ujiarygodnosci". Jako posumomanie istoty przedstaujionej metody, poujiedzmy, ze jest ona tuyrazem 
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zastosowania informacji Fishera w teorii pola w uj^ciu Friedena, ktorego inspiracja pochodzi z 
obszaru optyhi. 



Temat skryptu zujiqzany jest z dociekaniami, ktore dane mi byio proujadzic ujspolnie ze Sia- 
tuomirem Maniq, Dorotq Mroziakieujicz, Janem Siadkoujskim, Robertem Szafronem i Sebastianem 
Zajqcem, ktorym za te dociekania i rozmoiuy dzi^kuj^. 

Dzi^kuj^ mojej zonie Grazynie za utuazne przeczytanie tekstu skryptu. 
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Rozdzial 1 

Metoda najiui^kszej luiarygodnosci 



Z potuodu mozliujosci zastosoujania metody najwi^kszej wiarygodnosci (MNW) do roztuiqzania 
ujielu, bardzo roznych problemoiu estymacyjnych, staia si^ ona obecnie zarotuno metodq podstaujoujq 
jak roujniez punktem ujyjscia dla roznych metod analizy statystycznej. Jej ujszechstronnosc zujiqzana 
jest, po pierujsze z mozliujosciq przeproujadzenia analizy statystycznej dla maiej probki, opisu zja- 
ujisk nielinioujych oraz zastosotuania zmiennych losoujych posiadajqcych zasadniczo doujolny roz- 
klad prawdopodobienstwa [11], oraz po drugie, szczegolnymi ujiasnosciami otrzymyujanych przez 
niq estymatorouj, ktore okazujq si^ bye zgodne, asymptotyeznie nieobeiqzone, efektyujne oraz dosta- 
teczne [1 1]. MNW zasadza si^ na intuieyjnie jasnym postulaeie przyj^eia za praujdziuje takieh ujartosei 
parametrouj rozkiadu praujdopodobiehstuja zmiennej losoujej, ktore maksymalizujq funkcj^ ujiary- 
godnosci realizacji konkretnej probki. 

1.1 Podstaujouje pqj^cia MNW 

Rozujazmy zmiennq losoujq Y [1 1], ktora przyjmuje ujartosci y zgodnie z rozkiadem praujdopodo- 
biehstuja p (y|^), gdzie = i?2, '^k)'^ = {^s)s=i> j^st zbiorem k parametrouj tego rozkiadu (T 
oznacza transpozycj^). Zbior ujszystkich mozliujych ujartosci y zmiennej Y oznaczmy przez 3^. 
Gdy k > 1 ujtedy 9 nazyujamy parametrem wehtorowym. W szczegolnym przypadku k = 1 mamy 
9 = "d. Moujimy ujtedy, ze parametr 9 jest parametrem skalarnym. 

Poj^cie proby i probki: Rozujazmy zbior danych yi, y2, y^v otrzymanych uj obserujacjach 
zmiennej losoujej Y. 

Kazda z danych y„, n = 1, 2, A^, jest generomana z rozkiadu Pn{yn\9n) zmiennej losoujej Y w po- 
pulacji, ktorq charakteryzuje ujartosc parametru tuektoroujego 9n = (T?i,t?2, ■■■■,'^k)n = ((^s)s=i)n, 
n = 1,2, ...,N. Stqd zmiennq Y w n-tej populacji oznaczymy y„. Zbior zmiennych losoujych Y = 
{Yi,Y2, ...,Yn) = (Yn)n=i nazyujamy A^-ujymiaroujq prdb(j. 

Konkretnq realizacji y = (yi,y2, •••,yAr) = (yn)^=i proby Y nazyujamy probhq. Zbior ujszystkich 
mozliujych realizacji y proby Y tujorzy przestrzeh proby (ukiadu) oznaczanq jako B. 
Okreslenie: Ze ujzgl^du na to, ze n jest indeksem konkretnego punktu pomiaroujego proby, rozkiad 
Pn{'yn\9n) b^dziemy nazyujali rozkiadem punktowym (czego nie nalezy myhc z np. rozkiadem dys- 
kretnym). 
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Okreslenie funkcji ujiarygodnosci: Centralnym poj^ciem MNW jest funkcja wiarygodnosci 
L {y; B) (pojaujienia si^) probki y = {yn)n=v nazyujana tez wiarygodnosciq probhi. Jest ona funkcjq 
parametru 9. 

Przez ujzglqd na zapis stosotuany u; fizyce, b^dziemy stosotuali oznaczenie P{y \Q) = L {y; 0), ktore 
podkresla, ze formalnie/un/tcja wiarygodnosci jest Iqcznym rozhtadem prawdopodobienstwa^ po- 
jaxuienia si^ realizacji y = (yn)^=i proby Y = {Yn)n=i, to znaczy: 

TV 

P{Q)^P{y\Q) = \{pn{yn\en) . (1.3) 

n=l 

Zturocenie uiuagi tu (1.3) na tuyst^poiuanie y w argumencie funkcji luiarygodnosci oznacza, ze moze 
bye ona rozumiana jako statystyka P (y\Q^. Z kolei skrocone oznaczenie P{Q) podkresla, ze cen- 
traln^ spraujq w MNW jest fakt, ze funkcja ujiarygodnosci jest funkcjq nieznanych parametrouj: 

e = {61,62, 6nY = {On)n=l Przy CZym 9n = {'dm, ^2n, ^knf = {{^s)'!=l)n , (1.4) 

gdzie 6n jest ujektoroujym parametrem populacji okreslonej przez indeks proby n. W toku analizy 
chcemy oszacoujac ujektoroujy parametr 6. 

Zbior ujartosci parametrouj 9 = {6n)n=i tujorzy ujspoirz^dne rozkiadu pratudopodobiensttua ro- 
zumianego jako punkt w d = k x N - ujymiarotuej (podprzestrzeni) przestrzeni statystycznej S [6]. 
Temat ten rozujiniemy uj Rozdziale 2.2. 

Uujaga o postaci rozkiadouj punktoujych: W skrypcie zakiadamy, ze "punktowe" rozkiady pn (yn 1 6n) 
dla poszczegolnych pomiarouj n uj elementoujej probie sq niezalezne^. 

W ogolnosci UJ tresci skryptu, rozkiady punktouje pn {'yn\6n) zmiennych Yn chociaz s^ tego samego 
typu, jednak nie speiniajq xuarunku (1.5) charakterystycznego dla proby prostej. Taka ogolna sytuacja 
ma np. miejsce uj analizie regresji (Rozdziai 1.3). 



'Miara produktoma: Niech b^dzie danych przestrzeni probabilistycznych {Qi, Ti, Pi}, ... , {Q,n , J-n , Pn}, gdzie Q„, 
J'n, Pn sq, dla kazdego n — 1,2, ...,N, odpomiednio n-tq przestrzeni^ zdarzen, a - cialem na n„ oraz miarq probabili- 
styczn^. Wproiuadzmy na produkcie Q — f2i x ... x Qjv tzm. a - cialo produktome = Ti ® J-jv b^dqce najmniejszym 
a - cialem zamierajqcym zbiory postaci Ai x ... x An gdzie Ai £ Ti, ... , An G -^jv. 
Na produkcie f2 mozna zdeflnioiuac miar^ produktoiuq P takq, ze: 

P{Ai XA2X ... X An) = Pi{Ai)P2{A2)...Pn{An) . (1.1) 

Zmienne niezalezne: Zmienne losome Yi,...,Yn o luartosciach w R okreslone odpoiuiednio na {Qi,J^i,Pi}, ... , 
{flN,J-N, Pn} nazymamy niezaleznymi, gdy dla kazdego ciqgu zbiorom borelomskich Bi, Bn zachodzi roumosc: 

P(Yi e Bi, Y2 G B2, ... Yn e Bn) = ^1(^1 G Bi) ^2(^2 G B2) ... Pn{Yn G Bn) . (1.2) 

Ponieinaz po pramej stronie (1.2) stoj^ zdarzenia losome Y^^{Bn), gdzie B„ nalezy do cr - ciala B(R), zatem stmierdzenie 
(1.2) oznacza, ze zmienne losowe sq niezalezne wtedy i tylho wtedy, gdy a - ciala Tn generowane przez zmienne losowe 
Yn, n — 1,2, N, sq niezalezne [12]. 

^ W przypadku analizy jednej zmiennej losoiuej Y, rozkiady te obok niezaleznosci spelniajq dodatkoujo luarunek: 

Pn{yn\en)=p{y\e) , (1.5) 

CO oznacza, ze proba jest prosta. 
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Poj^cie estymatora parametru: Zaiozmy, ze dane y = {yn)n=i s§ generoujane losoiuo z punkto- 
ujych rozkiadouj praiudopodobienstuja Pn{yn\dn), n = 1,2, ...,Af, ktore chociaz nie znane, to 
jednak zaiozono o nich, ze dia kazdego n nalezq do okreslonej, tej samej klasy modeli. Zatem funkcja 
ujiarygodnosci (1.3) nalezy do okreslonej, d = k x N - tuymiaroujej, przestrzeni statystycznej S. 
Celem analizy jest oszacotuanie nieznanych parametroiu 0, (1.4), poprzez funkcj^: 

e = e{Y) = {61,92,..., 9mY = {9n)n=l gdzie 4 = {hnAn,...Anf = {{^sfs=l)n , (1-6) 

majqcq d = k X N skiadoujych. 

Kazda z funkcji "dkn = '^kn{Y) jako funkcja proby jest statystyhq, ktorq przez ujzglqd na to, ze siuzy 
do oszacoujyujania ujartosci parametru -df^n nazyujamy estymatorem tego parametru. Estymator pa- 
rametru nie moze zalezec od parametru, ktory oszacowuje'^ . 

Podsumoujujqc, odujzoroujanie: 

Q-.B^IC^, (1.7) 
gdzie ;B jest przestrzeni^ proby, jest estymatorem parametru (ujektoroujego) @. 

Roujnania ujiarygodnosci: B^dqc funkcjq G = {9n)n=i> funkcja ujiarygodnosci sluzy do konstruk- 
cji estymatorouj 9 = (^i, 6*2, ^at)^ = {9n)n=i parametrouj 6 = {9n)n=i- Procedura polega na 
ujyborze takich {9n)n=i < dIa ktorych funkcja ujiarygodnosci przyjmuje maksymalnq ujartosc, skqd 
statystyki te nazymamy estymatorami MNW. 

Zatem ujarunek konieczny otrzymania estymatorouj MNW sproujadza si^ do znalezienia rozuji^- 
zania ukiadu d = k x N tzuj. rownan wiarygodnosci [1]: 

5(G)|e=0 = ^lnP(y|e)|e=e=O, (1-8) 

gdzie zagadnienie maksymalizacji funkcji ujiarygodnosci P{y\Q) sproujadzono do (na ogoi) anali- 
tycznie roujnoujaznego mu problemu maksymalizacji jej logarytmu lnP(y \ Q). 



Okreslenie funkcji ujynikoujej: Funkcja S (Q) b^dqcq gradientem logarytmu funkcji ujiarygodno- 
sci: 

^ d\nP{y\e) \^ 

din P{y\e) 



S (9) ^^In P{y\e) 



nazyujamy funhcjq wynikowq. 



dlnP(y\e) 
\ dOM I 



gdzie 



d9n 



, (1-9) 



Po otrzymaniu (ujektora) estymatorouj O, zmaksymalizowanq ujartosc funkcji ujiarygodnosci de- 
finiujemy jako numerycznq ujartosc funkcji ujiarygodnosci poujstaiq przez podstaujienie do P{y \ Q) 
ujartosci oszacotuanej 6 uj miejsce parametru 9. 

Przyklad: Rozujazmy problem estymacji skalarnego parametru, tzn. Q = 9 (tzn. k = 1 oraz N = 1), 
dla zmiennej losoujej Y opisanej rozkiadem dujumianoujym (Bernoulliego): 

p{y\9)= ( j 9y{i-9r-y . (1.10) 



^Natomiast rozklad estymatora oszacomyiuanego parametru, zalezy od tego parametru. 
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Ply 



0) 




Rysunek 1.1: Graflczna ilustracja metody najiui^kszej luiarygodnosci dla P {y\0) okreslonego tuzorem 
(1.10) dla rozkiadu dujumianotuego. Przyj^to xuartosc parametru m = 5. Na skutek pomiaru zaobser- 
ujotuano tuartosc Y rownq y = 1. Maksimum P {y\0) przypada na luartosc 9 rownq punktotuemu 
oszacoujaniu 9 = y/m = 1/5 tego parametru. Maksymalizoruana ruartosc funkcji luiarygodnosci 
ujynosi P iy\9]. 



Estymacji parametru 9 dokonamy na podstaujie pojedynczej obserujacji (dlugosc proby = 1) 
zmiennej Y, ktorej iloraz Y/m nazyujamy cz^stosciq. Parametr m charakteryzuje rozkiad zmiennej 
Bernoulliego Y (i nie ma zujiqzku z diugosciq N proby). 

Zatem poniemaz y = (yi), uji^c P {y\9) jest funkcji ujiarygodnosci dla = 1 ujymiaroujej proby. 
Jej logarytm ujynosi: 

lnP(y|6') = In ^ ^ + y ln6' + (m - y) In (1 - 6*) . (1.11) 

W rozujazanym przypadku otrzymujemy jedno roujnanie ujiarygodnosci (1.8): 

Si()) = ly--[^i^-y)\ e=e =0 (1-12) 
a jego rozuji^zanie daje estymator MNW parametru 9 rozkiadu dujumianoujego, roujny: 

p, y 



m 



(1.13) 



Ilustracjq poiuyzszej procedury znajdotuania luartosci estymatora parametru 6* jest Rysunek 1.1 (gdzie 
przyj^to m = 5), przy czym na skutek pomiaru zaobserujoujano ujartosc Y roujnq y = 1- 
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1.2 Wnioskoiranie IT MNW 



Z potuyzszych rozujazan luynika, ze konstrukcja punktotuego oszacotuania parametru uj MNW 
oparta jest o postulat maksymalizacji funkcji luiarygodnosci przedstaiuiony poiuyzej. Jest on mst^pem 
do statystycznej procedury mnioskoujania. Kolejnym krokiem jest konstrukcja przedziaiu ujiarygod- 
nosci. Jest on odpoujiednikiem przedziaiu ufnosci, otrzymyujanego uj cz^stotliujoscioujym podejsciu 
statystyki klasycznej do procedury estymacyjnej. Do jego konstrukcji niezb^dna jest znajomosc roz- 
kiadu prarudopodobiensttua estymatora parametru, co (dzi^ki "porzqdnym" granicznym tulasnosciom 
stosotuanych estymatoroiu) jest mozliuje niejednokrotnie jedynie asymptotycznie, tzn. dia ujielkosci 
proby dqzqcej do nieskonczonosci. Znajomosc rozkiadu estymatora jest tez niezb^dna uje ujniosko- 
tuaniu statystycznym odnosz^cym si^ do ujeryfikacji hipotez. 

W sytuacji, gdy nie dysponujemy ujystarczajqcq ilosciq danych, potrzebnych do przeproujadzenia 
skutecznego cz^stotliujoscioujego ujnioskoujania, Fisher [13] zaproponoujai do okreslenia niepeujno- 
sci dotyczqcej parametru 6 ujykorzystanie maksymalizotuanej luartosc funkcji ujiarygodnosci. 

Przedzia} ujiarygodnosci jest zdefinioujany jako zbior ujartosci parametru B, dIa ktorych funkcja 
ujiarygodnosci osiqga (umoujnie) ujystarczajqco ujysokq ujartosc, tzn.: 



reprezentuje peujien typ unormoujanej ujiarygodnosci i jako taki jest ujielkosciq skalarnq. Jednak z 
poujodu niejasnego znaczenia okreslonej UJartosci parametru obci^cia c poj^cie to ujydaje si^ bye na 
pierujszy rzut oka za siabe, aby dostarczyc tak^ precyzj^ ujypoujiedzi jakq daje analiza cz^stotliujo- 
sciotua. 

Istotnie, ujartosc c nie odnosi si^ do zadnej ujielkosci obserujoujanej, tzn. na przykiad 1%-uje (c = 
0, 01) obci^cie nie ma scisiego probabilistycznego znaczenia. Inaczej ma si^ sprauja dla cz^stotliujo- 
scioujych przedziaiouj ufnosci. W tym przypadku ujartosc ujspoiczynnika a = 0, 01 oznacza, ze gdy- 
bysmy rozujazyli realizacj^ przedziaiu ufnosci na poziomie ufnosci 1 — a = 0, 99, to przy pobraniu 
nieskohczonej (uj praktyce ujystarczajqco duzej) liczby probek, 99% ujszystkich ujyznaczonych prze- 
dziaiouj ufnosci pokryioby praujdziujq (teoretycznq) ujartosc parametru uj populacji generalnej 
(skiadajqcej si^ z podpopulacji). Pomimo tej siabosci MNW zobaczymy, ze rozbudoujanie analizy 
stosunku ujiarygodnosci okazuje si^ bye istotne uje ujnioskoujaniu statystycznym analizy doboru mo- 
deli i to az po konstrukcja roujnah teorii pola. 

1.2.1 Wiary godnoscioujy przedzial ufnosci 

Przykiad rozkiadu normalnego z jednym estymoujanym parametrem: Istnieje przypadek po- 
zujalajqcy na prostq interpretacj^ przedziaiu wiarygodnosciowego jako przedziaiu ufnosci. Dotyczy 
on zmiennej Y posiadajqcej rozkiad Gaussa oraz sytuacji gdy (dla proby prostej) interesuje nas es- 
tymacja skalarnego parametru 9 b^dqcego ujartosciq oczekiujanq E(Y) zmiennej Y. Przypadek ten 




(1.14) 



dla peujnego parametru obci^cia c, nazyujanego poziomem wiarygodnosci. 



Iloraz ujiarygodnosci: 



P{y\e)/P{y\e) 



(1.15) 
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omoiuimy ponizej. W ogolnosci, przedziai luiarygodnosci posiadajqcy okreslony poziom ufnosci jest 
nazyujany przedziaiem ufnosci. 

CzQStotliiuoscioiue lunioskoiuanie o nieznanym parametrze 9 tuymaga okreslenia rozkiadu jego esty- 
matora, co jest zaztuyczaj mozliuje jedynie granicznie [6]. Podobnie lu MNW, o ile to mozliiue, korzy- 
stamy przy duzych probkach z tiuierdzeri granicznych dotyczqcych rozkiadu ilorazu ujiarygodnosci 
[6, 13]. W przypadku rozkiadu normalnego i parametru skalarnego okazuje si^, ze mozliuja jest kon- 
strukcja skonczenie ujymiarouja. 

Niech uji^c zmienna Y ma rozkiad normalny N (^9,a'^): 

Rozujazmy probk^ y = (yi, . . . ,yAr), ktora jest realizacjq proby prostej Y i zaiozmy, ze wariancja 
fj^ jest znana. Logarytm funkcji ujiarygodnosci dla (0, a^) ma postac: 

lnP(y|0) = -^ln(2^a2)-^J](y„-0)2 , (1.17) 

n=l 

gdzie ze ujzgl^du na pr6b§ prostq, uj argumencie funkcji ujiarygodnosci ujpisano uj miejsce G = 
parametr 9, jedyny ktory podlega estymacji. 

Korzystajqc z funkcji ujiarygodnosci (1.17) otrzymujemy oszacoujanie MNW parametru 9 roujne"^ 9 = 
y = F S yn- CO pozujala na zapisanie roujnosci Yln=i (y^ " = En=i (iYn - 0) + {9 - 9)) 

n=l ^ ^ 

— J2n=iiyn ~ + J2n=i(^ ~ ^)^- ^ koncu, uieskomplikoujane przeksztaicenia proxuadzq do na- 
st^pujqcej postaci logarytmu ilorazu ujiarygodnosci (1.15): 



Statystyka Wilka: Widac, ze po praujej stronie (1.21) otrzymalismy ujyrazenie kujadratouje. Ponieujaz 
y jest nieobciqzonym estymatorem parametru 9, co oznacza, ze ujartosc oczekiujana E{Y) = 9, zatem 
(dla rozkiadu y ~ cj^)) srednia arytmetyczna Y ma rozkiad normalny N (9,^ 



* Postac estymatora parametru skalarnego 9 rozltladu A*' (6, a^^ : Korzystaj^c z romnania ujiarygodnosci (1.8) dla przy- 
padku skalarnego parametru 9, otrzymujemy: 

skqd dla log-funkcji ujiarygodnosci (117), otrzymujemy: 

1 ^ 

71 = 1 

Zatem estymatorem parametru 9 jest srednia arytmetyczna: 
_ 1 ^ 

= y = -^y77. (1.20) 

n=l 

Estymator i jego realizoiuanq ujartosc b^dziemy oznaczali tak same, tzn. 9 dla przypadku skalarnego i B dla ujektoroiuego. 
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Z normalnosci rozkiadu Y ujynika, ze tzuj. statystyka ilorazu wiarygodnosci Wilka: 

p(Y\e) 

W = 2\n )^ ( ^xl, (1-22) 
P Y\ 



ma rozkiad x^, u; tym przypadku z jednym stopniem sujobody [13]. 

Wyskaloiranie statystyki Wilka uj przypadku normalnym: Wykorzystujqc (122) mozemy luyko- 
nac ujyskaloujanie ujiarygodnosci oparte o mozliujosc pouji^zania przedziaiu ujiarygodnosci z jego 
cz^stotliujoscioujym odpoujiednikiem. 

MianotDicie z (1.22) otrzymujemy, ze dla ustalonego (chociaz nieznanego) parametru 9 praujdopo- 
dobienstujo, ze iloraz ujiarygodnosci znajduje si^ uj ujyznaczonym dla parametru obci^cia c, ujiary- 
godnoscioujym przedziale ufnosci, ujynosi: 




P[Y\. 

>c I = P\ 2 In ( < -21nc | = P {xl < -21nc) . (1.23) 



Zatem jesli dlajakiegos < a < 1 ujybierzemy parametr obci^cia: 

c = e"^^?.{i-") , (1.24) 
gdzie Xi (i-a) j^^t kujantylem rz^du 100(1 — a)% rozkiadu x-kujadrat, to spelnienie przez 6 zuji^zku: 

' p (y\ 

oznacza, ze przyj^cie ujartosci c zgodnej z (1.24) daje zbior mozliujych martosci parametru 6: 

p(y 



P 



>A =p(x?<x?,(i_„)) =l-« (1.25) 



P Y 



> c| , (1.26) 

nazyujany 100(1 — a)%-oujym wiarygodnosciowym przedzialem ufnosci. Jest on odpoujiednikiem 
ujyznaczonego na poziomie ufnosci (1 — a) cz^stotlioujscioujego przedziaiu ufnosci dla 9. Dla analizo- 
ujanego przypadku rozkiadu normalnego z estymacjq skalarnego parametru 9 oczekiujanego poziomu 
zjaujiska, otrzymujemy po skorzystaniu z ujzoru (1.24) ujartosc parametru obci^cia roujnego c = 0.15 
lub c = 0.04 dla odpoujiednio 95%-oujego (1 — a = 0.95) bqdz 99%-oujego (1 — a = 0.99) przedziaiu 
ufnosci. Tak uji^c uj przypadku, gdy przedziat wiarygodnosci da sig wyskalowac rozkladem praw- 
dopodobienstwa, parametr obci^cia c posiada wlasnosc wielkosci obserwowanej interpretowanej 
cz^stotliwosciowo poprzez zwiqzeh z poziomem ufnosci. 

Zujrocmy uujag^, ze chociaz konstrukcje cz^stotliujoscioujego i ujiarygodnoscioujego przedziaiu uf- 
nosci sq rozne, to ich losowosc wynika uj obu przypadkach z rozkiadu prawdopodobienstwa esfy- 
matora 9. 

Cujiczenie: W oparciu o poujyzsze roziuazania ujyznaczyc, korzystajqc z (1.21) ogoinq postac prze- 
dziaiu ujiarygodnosci dla skalarnego parametru 9 rozkiadu normalnego. 
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1.2.2 RozkJady regularne 



DIa zmiennych o innym rozkiadzie niz rozkiad normalny, statystyka Wilka W ma lu ogolnosci 
inny rozkiad niz [13]. Jesli lui^c zmienne nie majq dokiadnie rozkiadu normalnego lub dysponu- 
jemy za malq probkq by moc odujoiyujac si^ do (ujynikajqcych z tujierdzen granicznych) rozkiadoiu 
granicznych dla estymatorouj parametrouj, ujtedy zujiqzek (1.22) (iui^c i (1.24)) daje jedynie przybli- 
zone ujyskaloiuanie przedziaiu ujiarygodnosci rozkiadem x^- 

Jednakze u; przypadkach tuystarczajqco regularnych rozhladow, zdefinioxuanych jako takie, w kto- 
rych mozemy zastosotuac przyblizenie ktuadratotue: 



poujyzsze rozumoiuanie oparte o ujyskaloujanie ujiarygodnosci rozkiadem Xi jest uj przyblizeniu 
siuszne. Wielkosc iF (j)^, ktora pojaiuiia si^ poujyzej jest obserwowanq informacjq Fishera, a po- 
tuyzsza formuia stanouji poujazne narz^dzie u; analizie doboru modeli. Mozna poujiedziec, ze caiy 
skrypt koncentruje si^ na analizie zastosouiania (ujartosci oczekimanej) tego ujyrazenia i jego uogol- 
nien. Do spraujy tej ujrocimy dalej. 

Przyklad: Roziuazmy przypadek parametru skalarnego 9 w jednym eksperymencie {N = 1) ze 
zmiennq Y posiadajqcq rozkiad Bernoulliego z m = 15. W ujyniku pomiaru zaobserujoujalismy 
luartosc Y = y = 3. Prosta analiza pozujala ujyznaczyc ujiarygodnoscioujy przedziai ufnosci dla 
parametru 9. Ponieujaz przestrzen Vq parametru 6 ujynosi Vq = (0, 1), zatem iatujo pokazac, ze dla 
c = 0, 01, c = 0, 1 oraz c = 0, 5 miaiby on realizacj^ odpoujiednio (0, 019; 0, 583), (0, 046; 0, 465) 
oraz (0, 098; 0, 337). Widac, ze ujraz ze ujzrostem ujartosci c, przedziai ujiarygodnosci zaciesnia si^ 
ujokoi ujartosci oszacoujania punktoujego 9 = y/m = 1/5 parametru 9 i nic dziujnego, bo ujzrost 
ujartosci c oznacza akceptoujanie jako mozliujych do przyj^cia tylko takich modelowych wartosci 
parametru 9, ktore gujarantujq ujystarczajqco ujysokq ujiarygodnosc probki. 

Poujyzszy przykiad pozujala nabyc peujnej intuicji co do sensu stosoujania ilorazu funkcji ujiarygod- 
nosci. Mianoujicie po otrzymaniu uj pomiarze okreslonej ujartosci y/m oszacoujujqcej parametr 9, 
jestesmy skionni preferoujac model z takq ujartosciq parametru 9, ktora daje uji^kszq ujartosc (loga- 
rytmu) ilorazu ujiarygodnosci P{y\9)/P{y\9). Zgodnie z podejsciem statystyki klasycznej nie ozna- 
cza to jednak, ze uiuazamy, ze parametr 9 ma jakis rozkiad. Jedynie ujobec nieujiedzy co do mode- 
loujej (populacyjnej) luartosc parametru 9 preferujemy ten model, ktory daje uji^kszq ujartosc ilorazu 
ujiarygodnosci uj probce. 

1.2.3 Weryfikacja hipotez z ujykorzystaniem ilorazu ujiarygodnosci 

Poujyzej ujykorzystalismy funkcj^ ujiarygodnosci do estymacji wartosci parametru ©. Funkcj^ 
ujiarygodnosci mozna roujniez ujykorzystac uj drugim typie ujnioskoujania statystycznego, tzn. uj 
weryfikacji hipotez statystycznych. 

Rozujazmy prostq hipotez^ zeroujq Hq : Q = Qq ujobec ziozonej hipotezy alternatyujnej Hi : Q ^ Gq. 
W celu przeproujadzenia testu statystycznego tuproiuadzmy unormoujan^ funkcji ujiarygodnosci: 




(1.27) 



P{y\eo) 



(1.28) 
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skonstmoujanq przy zaiozeniu praiudziujosci hipotezy zeroiuej. Hipotez^ zerouja Hq odrzucamy na 
rzecz hipotezy alternatytunej, jesli jej luiarygodnosc P (y|©o) jest "za maia". Sugeroujaioby to, ze zio- 
zona hipoteza alternatyujna Hi zaiuiera peujnq hipotezy prostq, ktora jest lepiej poparta przez dane 
otrzymane u; probce, niz hipoteza zerotua. 

Jak o tym tuspomniehsmy poujyzej, np. 5%-ouje obci^cie c w zagadnieniu estymacyjnym, samo w 
sobie nie momi nic o frakcji Hczby przedziaiou; luiarygodnosci pokryiuajqcych nieznanq martosc sza- 
coujanego parametru. Potrzebne jest ujyskaloujanie ilorazu luiarygodnosci. Roiuniez dla ujeryfikacji 
hipotez skalotuanie luiarygodnosci jest istotne. Struierdzihsmy, ze takie skaloiuanie jest mozHuje ujtedy 
gdy mamy do czynienia z jednoparametromym przypadkiem rozkiadu Gaussa, a przynajmniej z przy- 
padkiem ujystarczaj^co regularnym. 



Empiryczny poziom istotnosci: W przypadku jednoparametroujego, regularnego problemu z (6 = 
{9)^^i) jak uj Przykiadzie z Rozdziaiu 1.2.1, skaloiuanie poprzez luykorzystanie statystki Wilka siuzy 
otrzymaniu empirycznego poziomu istotnosci p. Ze ziuiqzku (1.22) otrzymujemy lutedy przybHzony (a 
dokiadny dla rozkiadu normalnego) empiryczny poziom istotnosci: 




P[Y\. 

P - P\ )^ \ > pY,^ / 1=^1 2 In Y \ > -21nCo6, 



P [Y\9o 

P {xl > -2ln Cobs) , gdzie c^bs = , (1-29) 

P (y\0obs 



przy czym 6obs jest luartosciq estymatora MNW 9 ujyznaczonq w obserujoiuanej (obs) probce y. Po- 
luyzsze okreslenie empirycznego poziomu istotnosci p oznacza, ze uj przypadku luystarczajqco regu- 
larnego problemu [13], istnieje typoujy zujiqzek pomi^dzy praiudopodobiehstujem (1.25), a empirycz- 
nym poziomem istotnosci p, podobny do ziuiqzku jaki istnieje pomi^dzy poziomem ufnosci 1 — a, a 
poziomem istotnosci a w analizie cz^stotliujoscioiuej. I tak, np. uj przypadku jednoparametroujego 
rozkiadu normalnego mozemy ujykorzystac luartosc empirycznego poziomu istotnosci p do stmier- 
dzenia, ze gdy p < a to hipotezy Hq odrzucamy na rzecz hipotezy i^i, a uj przypadku p > a nie 
mamy podstaujy do odrzucenia Hq. 



Problem bl^du pierujszego i drugiego rodzaju: Jednakze podobne skaloiuanie ilorazu luiarygod- 
nosci okazuje si^ bye znacznie trudniejsze juz chociazby tylko uj przypadku dmuparametroujego roz- 
kiadu normalnego, gdy obok 9 estymujemy [13]. Wtedy okreslenie co oznacza sformuioujanie „zbyt 
maia" martosc c jest dose doujolne i zalezy od rozujazanego problemu lub ujczesniejszej ujiedzy ujy- 
nikajqcej z innych zrodei niz proujadzone statystyczne ujnioskoujanie. Wybor duzego parametru ob- 
ci^cia c spoujoduje, ze istnieje uji^ksze praujdopodobiehstujo popeinienia bl§du pierwszego rodzaju 
polegajqcego na odrzuceniu hipotezy zeroiuej uj przypadku, gdy jest ona praujdziuja. Wybor maiego 
c spoujoduje zuji^kszenie praujdopodobiehstuja popeinienia bl§du drugiego rodzaju, tzn. przyj^cia 
hipotezy zeroujej uj sytuacji, gdy jest ona bi^dna. 
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1.3 MNW IT analizie regresji 



Analiza zatuarta w caiym Rozdziale 1.3 oparta jest na przedstaiuieniu metody MNW lu analizie 
regresji klasycznej podanym u; [14] i [15]. 

W metodzie regresji klasycznej, estymatory parametrouj strukturalnych modelu regresji sq otrzy- 
mane arytmetycznq metodq najmniejszych kiuadratouj (MNK). Zmienne objasniajqce Xn = Xn , 
n = l,...,N,nie majq lutedy charakteru stochastycznego, co oznacza, ze eksperyment jest ze luzgl^du 
na nie kontrolouiany. 

MNK polega na minimalizacji sumy ktuadratoiu odchylen obsertuoujanych tuartosci zmiennej ob- 
jasnianej (tzru. odpoiuiedzi) od ich luartosci teoretycznych speiniajqcych rorunanie regresji. MNK ma 
znaczenie probabilistyczne tylko in przypadku analizy standardoruej, gdy zmienna objasniana Y ma 
rozkiad normalny. Jej estymatory pokryinajq si^ rutedy z estymatorami MNW. Pokazemy, ze tak si^ 
spraujy majq. 

Zaiozmy, ze zmienne ¥±,¥2, ...,Yj\[ odpomiadajqce kolejnym martosciom zmiennej objasniajqcej, 
xi, X2, xjv, sq ujzgl^dem siebie niezalezne i majq rozkiad normalny ze sredniq fin = E (Y |x„ ) = 
E (Yn) zaleznq od mariantu zmiennej objasniajqcej x„, oraz takq samq mariancj^ o'^(l"n) = o-^{Y)- 
Funkcja miarygodnosci probki (yi, 1/2, 2/Af) dla normalnego klasycznego modelu regresji z para- 
metrem Q = fi = {^n)n=v ™^ postac: 

^ ^ 1 r 1 

Pip) = P (y|^) = n (yniMn) = n -J== exp <^ -—^ (y„ - llnf \ 

n=i n=i^27ra2 I 2a J 

^ exp.! '(y„-/i„)^ }> , (1.30) 




(27ra2)^/2 

gdzie / {yn\^J■n) , n = 1, 2...,N, sq punktomymi rozkiadami gestosci pramdopodobienstiua Gaussa. 
Widac, ze maksymalizacja P{fi) ze mzgl^du na {fin)n=i pociqga za sobq minimalizacji sumy kuja- 
dratouj reszt^ (SKR): 

N 

SKR = J2iyn-l^n)\ (1.31) 

n=l 

gdzie fin = E {¥ \xn) jest postulowanym modelem regresji. Zatem uj standardotuej, klasycznej anali- 
zie regresji, estymatory MNW pokrymajq si^ z estymatorami MNK. Widac, ze procedura minimalizacji 
dla SKR promadzi do liniomej w ¥n postaci estymatoroiu /i„ parametrouj /in- 

Problem z nielinioujym ukiadem roujnari ujiarygodnosci: Jednak rozmiqzanie ukiadu rotunan mia- 
rygodnosci (1.8) jest zaziuyczaj nietrytuialne. Jest tak, gdy otrzymany w ujyniku ekstremizacji ukiad 
algebraicznych romnan miarygodnosci dla estymatorom jest nieliniomy, co w konsekmencji oznacza, 
ze mozemy nie otrzymac ich w zmartej analitycznej postaci. Przykiadem moze bye analiza regresji 
Poissona, w ktorej do rozmiqzania romnah miarygodnosci mykorzystujemy metody iteracyjne. W ta- 
kich sytuacjach mykorzystujemy na ogol jakis program komputeromy do analizy statystycznej, np. 
zaujarty uj pakiecie SAS. Po podaniu postaci funkcji ujiarygodnosci, program komputeroujy dokonuje 



^SSE w literaturze angielskiej. 
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jej maksymalizacji roziuiqzuj^c ukiad (1.8) np. metodq NeuJton-Raphson'a [13, 15], ujyznaczajqc nu- 
merycznie ujartosci estymatorouj parametrouj modelu. 

Testy statystyczne: Logarytm ilorazu ujiarygodnosci jest roujniez tuykorzystytuany u; analizie regresji 
do przeprotuadzania testouj statystycznych przy ujeryfikacji hipotez o nie tuyst^potuaniu braku do- 
pasoiuania modelu mniej ziozonego, tzuj. "nizszego", o mniejszej liczbie parametrotu, w stosunku do 
bardziej ziozonego modelu "ujyzszego", posiadajqcego uji^kszq liczb^ parametrouj. Statystyka ujyko- 
rzystyujana do tego typu testouj ma postac [14, 13, 16]: 

p(Y\ei) 

-21n )^ ^ { (1.32) 

P [Y\@2) 

gdzie P (y\Qi^ jest maksymalizoujanq uiartosciq funkcji ujiarygodnosci dla modelu mniej ziozo- 
nego, a P (y\Q2^ dla modelu bardziej ziozonego. Przy praxudziujosci hipotezy zeroujej Hq o braku 
koniecznosci rozszerzania modelu nizszego do ujyzszego, statystyka (1.32) ma asymptotycznie rozkiad 
z liczbq stopni sujobody roujnq roznicy liczby parametrouj modelu ujyzszego i nizszego. 

Analogia ujspolczynnika determinacji: Maksymalizoujana ujartosc funkcji ujiarygodnosci zacho- 
ujuje si^ podobnie jak wspoiczynnik determinacji [14, 15], tzn. rosnie ujraz ze ujzrostem liczby 
parametrouj uj modelu, zatem ujielkosc pod logarytmem nalezy do przedziaiu (0, 1) i statystyka (1.32) 
przyjmuje ujartosci z przedziaiu (0, +oo). Stqd (asymptotycznie) zbior krytyczny dla Hq jest praujo- 
stronny. Im lepiej uji^c model ujyzszy dopasoujuje si^ do danych empirycznych uj stosunku do mo- 
delu nizszego, tym uji^ksza jest ujartosc statystyki ilorazu ujiarygodnosci (1.32) i uji^ksza szansa, ze 
ujpadnie ona uj przedziai odrzucefi hipotezy zerotuej Hq, ktory lezy uj praujym ogonie ujspomnianego 
rozkiadu [14, 15]. 
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1.3.1 Deujiancja jako miara dobroci dopasomania. Rozklad Poissona. 

Rozmazmy zmiennq losoiuq Y posiadajqcq rozkiad Poissona. Rozkiad ten jest ujykorzystyujany 
do modeloujania zjaujisk zujiqzanych z rzadko zachodzqcymi zdarzeniami, jak na przykiad z liczbq 
rozpadajqcych si^ niestabilnych jqder uj czasie t. Ma on postac: 

p{Y = y\fj,) = —-^ , oraz y = 0, 1, oo , (1.33) 

gdzie fi jest parametrem rozkiadu. Zmienna losouja podlegajqca rozkiadouji Poissona moze przyjqc 
tylko nieujemnq ujartosc caikoujitq. Rozkiad ten mozna ujyproujadzic z rozkiadu dujumianoujego, 
bqdz ujykorzystujqc rozkiady Erlanga i ujykiadniczy [11]. 

Zujiqzek luariancji z luartosciq oczekiujanq rozkiad Poissona: Rozkiad Poissona posiada petunq in- 
teresujqcq ujiasciujosc statystycznq, mianoujicie jego ujartosc oczekiujana, luariancja i trzeci moment 
centralny sq roujne parametrouji rozkiadu //: 

E(Y) = a\Y) = fi3 = fi. (1.34) 

Aby pokazac dujie pierujsze roujnosci uj (1.34) skorzystajmy bezposrednio z delinicji odpoujiednich 
moment ouj, otrzymujqc: 

oo oo y _^ OO y 

y=o y=o y=i 



^(y-l)! l\ 
y=l ' 1=0 



oraz, korzystajqc z (1.35): 



a' (Y) = E (y2) - [E {Y)f = E {Y^) - = Y^y' ■ p {Y = y\^,) - 

y=o 

°° ,,yc-/i °° ,,y °° 

E ■ ^ - E y - ''^ E (' + 1) f 

y=o y=l '' 1=0 

^2 = g-M^ [g/^^ + gM] _ ^2 ^ (^2 ^ ^) _ ^2 ^ ^ . (1_35) 



J=0 



Uujaga: Zatem otrzymalismy waznq wlasnosc rozkiadu Poissona, ktora moiui, ze stosunek dysper- 
sji a do ujartosci oczekiujanej E{Y) maleje pierujiastkoujo uiraz ze ujzrostem poziomu zmiennej Y 
opisanej tym rozkiadem: 

a 1 



E{Y) ^ 



(1.37) 



Fakt ten oznacza z zaiozenia inne zachowanie sig odchylenia standardowego w modelu regresji Po- 
issona niz UJ klasycznym modelu regresji normalnej (uj ktorym zakiadamy jednorodnosc ujariancji 
zmiennej objasnianej uj roznych ujariantach zmiennej objasniajqcej). 

Cujiczenie: Pokazac (1.34) dla trzeciego momentu. 
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Przyczyna nielosoiuej zmiany irartosci zmiennej objasnianej Roztuazmy model regresji dla zmien- 
nej objasnianej Y posiadajqcej rozkiad Poissona. Zmienne y„, n = 1,2, ...,N posiadajq wi^c roiuniez 
rozkiad Poissona i zakiadamy, ze sq parami wzajemnie niezalezne. Niech X jest zmiennq objasnia- 
jqcq (tzuj. czynnikiem) kontrolotuanego eksperymentu, uj ktorym X nie jest zmiennq losoiuq, ale jej 
zmiana, jest roztuazanajako mozlima przyczyna luarunkujqca nielosowq zmiany wartosci zmiennej 
Y. 

Gdy czynnikouj Xi,X2, ■■■Xf^ jest uji^cej, ujtedy dla kazdego punktu n proby podane sq ujszystkie ich 
tuartosci: 

xin,X2n,---Xkn , gdzie n = l,2,...,N , (1.38) 
gdzie pierujszy indeks w Xin, i = 1,2, ...,k, numeruje zmienn^ objasniajqcq. 



Brak mozliujosci eksperymentalnej separacji podstaujoiuego kanaiu n: Niech x„ = X2n, 
Xkn) oznacza zbior ujartosci jednego tuariantu zmiennych {Xi,X2, X^), tzn. dla jednej konkretnej 
podgrupy n. Ziurocmy uujag^, ze indeks proby n numeruje podgrup^, co oznacza, ze u; pomiarze 
tuartosci Yn nie ma mozliujosci eksperymentalnego si^gni^cia "uj giqb" indeksu n - tego kanaiu, tzn. 
do rozroznienia ujpiyujouj na ujartosc y,j piynqcych z roznych "pod-kanaiouj" i, gdzie i = 1,2, ...,k. 



Model podstaujotuy: Zakiadajqc brak zaleznosci zmiennej Y od czynnikouj Xi,X2, ...Xk, rozujaza 
si^ tzuj. model podstawowy. Dla rozkiadu (1.33) i proby Y = {Yn)n=i, funkcja ujiarygodnosci przy 
parametrze @ = fi= {fin)n=v ™^ postac: 



N 



p ?iM =n 



Un=l f^n" ) exp ( - J2n=l 

7n~ 



Y ' 



(1.39) 



n=l nn=l-^"' 

jest uji^c ujyrazona jako funkcja luektoroujego parametru = {nn)n=v gdzie kazdy z parametroxu 
/i„ = E{Yn) jest parametrem skalarnym. Rozujazmy ukiad roujnah MNW: 

d 



dfin 



InP y|/x 



0, n = l,2,...,N 



Dla funkcji ujiarygodnosci (1.39) otrzymujemy: 



N 



N 



N 



n=l 



n=l 



n=l 



Zatem rozujiqzanie ukiadu (1.40) daje: 

fJ-n = fin = yn, n = 1,2, ...,7V 



(1.40) 



(1.41) 



(1.42) 



jako estymatory modelu postaujoujego. Zatem funkcja ujiarygodnosci (1.39) modelu podstaujoujego 
przyjmuje uj punkcie fi zadanym przez estymatory (1.42) ujartosc maksymalnq: 



gdzie zastosoujano oznaczenie ft = [jii,fi2-, ■■■fj-N)- 



(1.43) 
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1.3.2 Analiza regresji Poissona. 

Niech zmienna zalezna Y reprezentuje liczb^ zliczen badanego zjatuiska (np. przypadkotu atuarii 
okreslonego zakupionego sprz^tu), otrzymanq dla kazdej z N podgrup (np. klienckich). Kazda z tych 
podgrup ujyznaczona jest przez komplet ujartosci zmiennych objasniajqcych X = {Xi,X2, X^) = 
X = {xi,X2, ...jXk) (np. luiek, poziom ujyksztaicenia, eel nabycia sprz^tu). Zmienna Yn okresla liczb^ 
zliczen zjatuiska w n-tej podgrupie, n = 1, 2, A^. W konkretnej probce (Yn)n=i = (yn)^=i- 

Okreslenie modelu regresji Poissona: Rozujazmy nast^pujqcy model regresji Poissona: 

fin = E{Yn)=inr{Xn,/3) , n=l,2,...,N, (1.44) 

opisujqcy zmian^ ujartosci oczekiujanej liczby zdarzen Yn (dla rozkiadu Poissona) ujraz ze zmianq 
wariantu x^ = (xin, xm, ■■■,Xkn)- 

Funkcja regresji po praiuej stronie (1.44) ma diua czynniki. Funkcyjny czynnik funkcji regresji, r {xn , /5), 
opisuje tempo zdarzen okreslanych mianem porazek (np. aujarii) uj n-tej podgrupie (tzn. jest cz^sto- 
sciq tego zjaujiska), skqd r {x^P) > 0, gdzie /3 = (/3o, /3fc) jest zbiorem nieznanych parametrou; 

tego modelu regresji. Natomiast czynnik £n jest ujspoiczynnikiem okreslajqcym dla kazdej n-tej pod- 
grupy (np. klientouj) skumulowany czas prowadzenia badan kontrolnych dla wszystkich jednostek 
tej podgrupy. 

Ponietuaz funkcja regresji^ r {xn, (3) przedstaiuia typoujq liczby porazek na jednostk^ czasu, zatem 
nazyujamy jq ryzyhiem. 

Uujaga o postaci funkcji regresji: Funkcj ^ r ( j;„ , /3) mozna zamodeloujac na rozne sposoby [ 1 3]. Wpro- 
ujadzmy oznaczenie: 

k 

Xl^P^ + Y^Pj^jn. (1.45) 

J=l 

Funkcja regresji r {xn, P) ma roznq postac uj zaleznosci od typu danych. Moze miec ona postac cha- 
rakterystycznq dla regresji linioiuej (tuielokrotnej), r (x„, /3) = A* , ktorq stosujemy szczegolnie ujtedy 
gdy zmienna Y ma rozklad normalny. Postac r (xnP) = 1/A* jest stosoujana uj analizie z danymi 
pochodzqcymi z rozkiadu ehsponentialnego, natomiast r /3) = 1/(1 + exp(— A* )) uj modelouja- 
niu regresji logistycznej dla opisu zmiennej dychotomicznej [14, 13]. 

Postac funkcji regresji uzyteczna w regresji Poissona jest nast^pujqca: 

k 

r {xn, /3) = exp(A* ) , A* = /3o + ^ PjXjn ■ (1.46) 

i=i 

Ogolniej mouji^c analiza regresji odnosi si^ do modeloujania ujartosci oczekiujanej zmiennej zaleznej 
(objasnianej) jako funkcji peujnych czynnikouj. Postac funkcji ujiarygodnosci stosoujanej do estyma- 
cji ujspoiczynnikouj regresji /3 odpoujiada zaiozeniom dotyczqcym rozkiadu zmiennej zaleznej. Tzn. 
zastosotuanie konkretnej funkcji regresji r{xn,P), np. jak uj (1.46), ujymaga okreslenia postaci funkcji 

^Czynnik r {x„, (3) nazymany dalej funkcjq regresji, chociaz ujiasciujie naziua ta odnosi si^ do calej E (Yn)- 
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cz^stosci r{xn, /5), zgodnie z jej postaciq dobranq do charakteru losoLuej zmiennej Y przy ktorej ge- 
neroujane dane uj badanym zjaujisku. Na ogoi przy konstrukcji r(a;„, /3) pomocna jest uprzednia 
ujiedza dotyczqcq relacji mi^dzy roziuazanymi zmiennymi. 

Funkcja tuiarygodnosci dia analizy regresji Poissona: Ponieiuaz Yn ma rozklad Poissona (1.33) ze 
sredniq fin, p{Yn\iJ.n) = yT^"^"' n = 1, 2,...,N, zatem dane Yn = 0,1,. ..,00 dIa okreslonego 
n = 1,2, N sq generoiuane z rozkiadouj luarunkoujych: 



ujokoi funkcji regresji, (1.44), fin = r{xn, (3), dla n = 1, 2, A^. Funkcja ujiarygodnosci dla analizy 
regresji Poissona ma u;i^c postac: 



71=1 n=l 



nil (4, r {xn, exp [- Ell 4 r /3) 



lln=l 



(1.48) 



Aby UJ praktyce poshizyc si§ funkcjq regresji r(x„, /3) b^dqcq okreslonq funkcjq zmiennej A* = /3o + 
Y^j=i PjXjn, parametry /3o, ■.■,13k muszq bye oszacoujane. Estymatory MNW, /3o, /3i, /3fc, tych 
parametrouj otrzymuje si^ rozujiqzujqc k + 1 roujnan ujiarygodnosci: 

d 



lnP(y|/3j =0, j = 0,l,2,...,fc . (1.49) 
W przypadku regresji Poissona P {y\I3^ jest okreslona zgodnie z (1.48). 

Algorytmy IRLS: Zauujazmy, ze dla rozkiadu Poissona zachodzi zgodnie z (1.34) oraz (1.44), cr^ (y„) = 
E (Yn) = (-nf (xn, /3), CO oznacza, ze wariancja cr^ (Yn) zmiennej objasnianej nie jest stala lecz 
zmienia si§ jako funkcja in oraz Xn, wchodzqc w analiz§ z roznymi wagami wraz ze zmianq n. 
Na fakt ten zujrocilismy juz uujag^ przy okazji zujiqzku (1.37). Poniexuaz ukiad roujnan ujiarygodnosci 
(1.49) jest na ogoi rozujiqzyujany iteracyjnymi metodami numerycznymi [14], a tuariancja (Yn) jest 
roujniez funkcjq /3, zatem na kazdym kroku procesu iteracyjnego wagi te zmieniajq si^ jako funkcja 
zmieniajqcych si^ skiadoujych estymatora (3. Algorytmy takiej analizy okresla si^ ogolnym mianem 
algorytmow najmniejszych kwadratow^ iteracyjnie wazonych (IRLS). 

Uujaga o programach: Rozne programy do analiz statystycznych, uj tym SAS tuykorzystujqcy pro- 
cedure PROC GENMOD, mogq bye uzyte do znajdoujania estymatorouj /3 MNW dla funkcji ujiary- 
godnosci (1.48). Roujniez obserwowana macierz kowariancji estymatorow^ oraz miary dobroci do- 



^Nalezy jednak pami^tac, ze zturotu "najmniejszych kujadratovu" nie nalezy tu brae doslomnie, gdyz metoda najmniej- 
szych kmadratom ma sens jedynie tutedy, gdy rozklad zmiennej Y jest normalny (por. Rozdzial 1.3). 

^Obseriuoiuana macierz (luariancji-) komariancji V{P) estymatorouj P MNW jest zdefinioiuana jako odmrotnosc macie- 
rzy obserujoujanej informacji Fishera (2.4) [13]: 

V{P) := iF-^(/3) . (1.50) 
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pasoujania modelu, takie jak omotuiona dalej deujiancja, mogq bye otrzymane przy uzyciu poujyzej 
ujspomnianych programouj. 

1.3.2.1 Test statystyczny dla dobom modelu uj regresji Poissona 

Uiuaga o lui^kszej ujiarygodnosci modelu podstaujoujego: Maksymalna ujartosc funkcji ujia- 
rygodnosci P (y|/i) ujyznaczona w oparciu o (1.43) b^dzie, dla kazdego zbioru danych i dla liczby 
parametrotu A; + 1 < A^, uji^ksza niz otrzymana przez maksymalizacj^ funkcji ujiarygodnosci (1.48). 
Jest tak, ponieujaz uj ujyrazeniu (1.43) na funkcji ujiarygodnosci modelu podstaujoujego nie narzuca 
sig zadnych ograniczen na postac fin, natomiast (1.48) ujymaga aby /i„ = ^^r (x^, /3). 



Hipoteza zeroiua o nie ujyst^poujaniu braku dopasoujania uj modelu nizszym: Zgodnie z poujyz- 
szym zdaniem, analiz^ doboru modelu regresji mozna rozpoczqc od postaujienia hipotezy zeroiuej 
ujobec alternatyxunej. W hipotezie zeroujej ujyroznimy proponoxuany model regresji. Wybor modelu 
badanego oznacza ujybor funkcji ujiarygodnosci (1.48) z nim zujiqzanej. Statuiamy uji^c hipotezy ze- 
roujq: 

Ho : = {xn,/3) , n = 1, 2, ...,N, (1.51) 

ktora odpotuiada ujyborouji modelu z funkcjq ujiarygodnosci (1.48), ujobec hipotezy alternatyumej: 

B.A ■ fin nie ma ograniczonej postaci, n = 1, 2, ...,N , (1-52) 

ktora odpoxuiada tuyborouji modelu podstaujoujego zaiuierajqcego tyle parametrouj fin ile jest punk- 
touj pomiaroujych, tzn. N, z funkcjq ujiarygodnosci (1.43). 

Niech uji^c P (^^1/3^ jest maksymalnq ujartosciq funkcji ujiarygodnosci okreslonq jak uj (1.48). Ozna- 
cza to, ze UJ miejsce parametrouj (3 = (/Jq, ■■■,f3k) podstaujiono ich estymatory j3 = (^/3o, /3fc^ 
ujyznaczone przez MNW, jako te ktore maksymalizujq funkcji ujiarygodnosci (1.48). Podobnie rozu- 
miemy funkcji ujiarygodnosci P \ Y\fi\ modelu podstaujoujego. 



Ponieujaz celem kazdej analizy jest otrzymanie mozliiuie najprostszego opisu danych, model /i„ = 
^nr{xn,fi) zatuierajqcy k + I parametrouj (3, b^dzie uznany za dobry, jesli maksymalna ujartosc 
funkcji ujiarygodnosci ujyznaczona dla niego, b^dzie praujie tak duza, jak funkcji ujiarygodnosci dla 
nie niosqcego zadnej informacji modelu podstaujoujego z liczbq parametrouj fin rournq licznie punk- 
touj pomiaroujych N. Sformuloujanie „praujie tak duza" oznacza, ze ujartosc funkcji ujiarygodnosci 
P{y\/3) nie moze bye istotnie statystycznie mniejsza od P (y|/i). Zasadniczo poujinno to oznaczac, 
ze musimy podac miary pozujalajqce na okreslenie statystycznej istotnosci przy poshigiujaniu si^ in- 
tuicyjnym parametrem obci^cia c (Rozdziai 1.2). Okazuje si^, ze dla duzej proby, miary typu (1.53), 
podane ponizej, uzyskujq cechy pozujalajqce na budoumie ujiarygodnoscioujych obszarouj krytycz- 
nych nabyujajqcych charakteru standardoujego (cz^stotliujoscioujego). 



Okreslenie deujiancji: Wproujadzmy statystyk^ typu ilorazu wiarygodnosci: 

p(y|/3) 



-2 In 



P(Y\fi 



(1.53) 
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nazyujanq dewiancjq (deviance) dla modelu regresji, w tym przypadku dla modelu Poissona z okre- 
slonq postaciq Hn = Inf {xn,f3)- Siuzy ona do badania dobroci dopasoujania modelu z zadanq po- 
staciq /Uri = inf {xn,P) uj stosunku do modelu podstaujotuego, bez narzuconej postaci na tzn. do 
stujierdzenia, czy P{y\ ji) jest istotnie mniejsza od P {y\fi), co sugeroujaioby istotny statystycznie brak 
dopasoujania badanego modelu ^„ = {xn,P), do danych empirycznych. Jak pokazemy ponizej 
deujiancja moze bye rozumiana jako miara zmiennosci reszt (tzn. odchylenia ujartosci obserujouja- 
nych uj probie od ujartosci szacoujanych przez model) wokol Unii regresji. 



Przy praiudziujosci hipotezy Hq : fin = inr rozkiad deiuiancji D yf3j dla regresji Poissona, 

mozna asymptotycznie przyblizyc rozkiadem chi-kiuadrat (por. dyskusja lu [13, 14]) z — A; — 1 stop- 
niami sujobody. 

Zatem statystyczny test dobroci dopasoujania, tzn. nieujyst^poujania braku dopasoujania badanego 
modelu Hq : ^„ = /3), uj stosunku do modelu podstaujoujego, przebiega uj regresji Poissona 

nast^pujqco: Poroujnujemy otrzymanq uj probie ujartosc statystyki D{/3) z ujartosciq krytycznq lezqcq 
uj praiuym ogonie rozkiadu chi-kujadrat (o — A; — 1 stopniach sujobody). Przyj^cie przez D (^^^ 
ujartosci roujnej lub uji^kszej od krytycznej skutkuje odrzuceniem hipotezy zeroujej. 



Wyznaczenie liczby stopni sujobody deujiancji: Podana liczba stopni suJobody deujiancji D y(3 
ujynika z nast^pujqcego rozumoujania. Zapiszmy (1.53) uj postaci: 

D + 2 In P (y 1/3) = 2 In P (Y\fi) , (1.54) 



CO po skorzystaniu z (1.48) dla /3 = /3 ma postac: 
D[p)-2^lnr(^Xnj) =21nP(y|/i)+21n my„! -21n n](4r(x„,/3)) J . (1.55) 

n=l \n=l J \n=l J 

Mozna zauxuazyc, ze prauja strona tego roujnania ma A^-stopni sujobody. Istotnie, ze ujzgl^du na 
(1.42)^, ft = (fin) = (Yn), n = 1,2,...,N, liczba niezaleznych zmiennych po praujej strony po- 
ujyzszego roxunania, ktorych ujartosci trzeba okreslic z eksperymentu, ujynosi N. Natomiast drugi 
skiadnik po leujej stronie ma liczby stopni sujobody roujnq k + 1, co jest liczbq estymatorouj parame- 
trouj strukturalnych /3 modelu regresji, ktorych ujartosci trzeba okreslic z eksperymentu. Ponieujaz 
liczba stopni suJobody po praujej i leujej stronie roujnania musi bye taka sama, zatem liczba stopni 
suJobody deujiancji -D(/3) ujynosi N — k — 1. 

Testy ilorazu ujiarygodnosci: Deujiancje dla hierarchicznych klas modeli mogq siuzyc do budoujy 
testouj stosunku ujiarygodnosci. Zujrocmy szczegolnie uujag^ na funkcj^ ujiarygodnosci (1.48) zaujie- 

rajqcq zbior parametrouj (3 = (/3o, , /3fc) z dewiancjq D ^/3^ danq ujyrazeniem (1.53). Przypu- 

scmy, ze chcemy zujeryfikoujac hipotezy o tym, ze k — r (gdzie < r < fc) ostatnich parametrouj 
b^dqcych skiadoujymi uiektora /3 jest roujnych zeru. 

Hipoteza zerowa, o nieistotnosci rozszerzenia modelu nizszego do ujyzszego, ma ujtedy postac: 

Ho : /3.+1 = Pr+2 = ... = = , (1.56) 



przyj^tym przedstainieniu danych jak dla diagramu punktomego, jest ogolnie liczby punktoiu pomiaromych (roiun^ 
liczbie ujariantouj czy komorek). Tylko dla modelu podstairoirego jest A'^ roiuniez liczbq parametrom. 
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Hipoteza alternatDwna Ha mouji, ze przynajmniej jeden z parametrom strukturalnych /3r+i, /3r+2; 
jest rozny od zera. 



Funkcja tuiarygodnosci przy pratudzituosci hipotezy zeroiuej Hq, (1.56), ma postac takq jak uj (1.48), 
tyle, ze zastqpiono lu niej parametr /3 parametrem '■ 



/3(j.) = (/3o, /?!, /3r; 0, 0, ...,0) gdzie liczba zer wynosi k — r 



(1.57) 



Oznaczmy funkcje ujiarygodnosci tego modelujako P{Y\f3(^^^), a /3(^) niech b^dzie estymatorem MNW 
ujektoroiuego parametru (3^^)' ujyznaczonym przez rozLuiqzanie odpotuiadajqcego mu ukiadu roujnari 
ujiarygodnosci (oczytuiscie dla niezerotuych parametrouj /3q, f3i, /3r)- Estymator /3(r) = {(3q, /Si, 
Pr', 0, 0, 0) maksymalizuje funkcj^ ujiarygodnosci P (Y\/3(^r) 



Test ilorazu wiarygodnosci dla ujeryfikacji hipotezy Hq przeprotuadzamy posiugujqc si^ statystykq 
ilorazu wiarygodnosci: 



-2 In 



P{Y\(3(r) 



P{Y\(3 



(1.58) 



ktora przy praiudzituosci hipotezy zeromej ma asymptotycznie rozkiad chi-kujadrat zk — r stopniami 
siuobody, co ujidac, gdy zapiszemy (1.58) jako roznic^ demiancji: 



-2 hi 



p y|/3 



-2 In 



P [Ylf^ir) 

p(Y\f, 



+ 2 In 



P 



{y\^ 



P[Y\fi 



D [f3^,)\ - D 1(3) , (1.59) 



oraz skorzystamy z podobnej analizy jak dla (1.55). 



Zatem, przy pramdzimosci hipotezy zeromej (1.56), ktorq mozna zapisac jako Hq : f3r+i = /3r+2 = 
... = = 0, roznica L'(/3(^)) — D{f3) ma dla duzej proby uj przybHzeniu rozkiad chi-kujadrat zk — r 
stopniami sujobody. 



Wniosek: Jesli uzyujamy regresji Poissona do analizoxuania danych empirycznych, modele tujorz^ce 
hierarchiczne klasy mogq bye porotunyiuane miedzy sobq poprzez ujyznaczenie statystyki ilorazu 
ujiarygodnosci (1.58), lub co na jedno ujychodzi, poprzez ujyznaczenie roznicy (1.59) miedzy parami 
deujiancji dla tych modeli. Nalezy przy tym pami^tac o ujniosku jaki juz znamy z analizy deujiancji, 
ze im model gorzej dopasowuje si§ do danych empirycznych tym jego dewiancja jest wi§ksza. 



1.3.2.2 Podobieristujo deujiancji do SKR analizy cz^stotliujoscioujej 

Warunkouje ujartosci oczekiujane Hn = E{Yn) = i'{xni P), n = 1,2, N, (1.44), sq uj analizie 
regresji przyjmoujane jako teoretyczne przetuidyujania modelu regresji dla ujartosci zmiennej obja- 
snianej Yn, zujanej odpoxuiedziq (ukiadu). W probie odpoujiadajq im oszacoujania, oznaczone jako Yn, 
ktore UJ n-tej komorce sq nast^pujqce: 

Yn = enrixn,h, n=l,2,...,N, (1.60) 
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zgodnie z tuyestymoiuanq postaciq modelu regresji. Wykorzystujqc (1.60) mozemy zapisac detuiancj^ 
modelu (1.53) nastepujqco: 



D((3 



-2 In 



P{Y\f3 



-2 In 



y„ iny„ - - y„ iny„ + y„ 



N 



N 







exp i^- 


2—jn= 


lYn) 




VYr, 


exp (^- 






N 




N 







tzn: 



D 



N 



n=l 



.71=1 



y^in 



n=l n.=l 



Y —Y 



n=l 



(1.61) 



(1.62) 



Podobieristujo D do SKR: Poujyzsza postac deujiancji oznacza, ze D{P) zachoujuje si^ u; poniz- 



szym sensie jak suma kmadratou; reszt SKR = Ylin=i0^ri — YnY u; standardotuej ujielorakiej re- 
gresji linioiuej. Otoz, gdy dopasoujyujany model dokiadnie przeujiduje obserujoujane ujartosci, tzn. 
Yn = Yni n = 1,2, .., lutedy, jak SKR w analizie standardoujej, tak -D(/3) uj analizie ujiarygod- 
noscioiuej jest roiune zeru [14, 17]. Z drugiej strony ujartosc -D(/3) jest tym uji^ksza im uji^ksza jest 
roznica mi^dzy ujartosciami obserujoujanymi Y^ i tuartosciami przeujidyujanymi Yn przez oszaco- 
luany model. 

Asymptotyczna postac D: W analizoujanym modelu Yn, n = 1, 2, sq niezaleznymi zmiennymi 
Poissona (np. zmiennymi cz^stosci), natomiast ujartosci Yn ich przeruidyruaniami. Nietrudno prze- 
konac si^, ze gdy ujartosci przeujidyujane majq rozsqdnq ujartosc^°, np. 1^ > 3 oraz (y„ — Yn) « Yn, 
n = l,2,..,Af tak, ze (y„— y„)/y„ << 1, ujtedy ujyrazenieujnaujiasiekiuadratoujymuj(1.62)mozna 
przyblizyc przez (y„ — Yn)"^ / (2 Yn), a statystyk^ (1-62) mozna przyblizyc statystykq o postaci: 



X 



N 

E 

n=l 



y — y 



Yn 



(1.63) 



ktora (dla duzej proby) ma rozkiad chi-kiuadrat z N — k — I stopniami siuobody [14]. 



Zauinazmy, ze statystyka (1.63) moze miec mylqco duzq inartosc gdy ujielkosci Yn bardzo male. 
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1.4 Zasada niezmienniczosci ilorazu funkcji iriarygodnosci 



Z poujyzszych roziuazan ujynika, ze funkcja ujiarygodnosci reprezentuje niepetunosc dla usta- 
lonego parametru. Nie jest ona jednak g^stosciq rozkiadu praujdopodobienstiua dla tego parametru. 
Poj^cie takie byioby caikotuicie obce statystyce klasycznej (nie luiqczajqc procesotu stochastycznych). 
Inaczej ma si^ sprauja u; tzuj. statystyce Bayesoiuskiej. Aby zrozumiec roznic^ pomi^dzy podejsciem 
klasycznym i Bayesoujskim [18] roztuazmy transformacj^ parametru. 

Przykiad transformacji parametru: Roziuazmy eksperyment, w ktorym dokonujemy jednokrotnego 
pomiaru zmiennej o rozkiadzie dujumianotuym (1.10). Funkcja tuiarygodnosci ma uji^c postac P{6) = 

(tn \ 
1 6^{l — 9)"^^^. Niech parametr m = 12 a u; pomiarze otrzymano x = 9. Testujemy model, dla 

ktorego 9 = 9i =3/4 ujobec modelu z ^ = 6*2 = 3/10. Stosunek ujiarygodnosci ujynosi: 



p{ei = 3/4) 

P{92 = 3/10) 





l{l-9,Y 

= 173.774 (1.64) 



(1 - 



Dokonajmy hiperbolicznego ujzajemnie jednoznacznego przeksztalcenia parametru: 

^p = l/9 . (1.65) 

~ / Tn \ 

Funkcja ujiarygodnosci po transformacji parametru ma postac P(V') =1 1 (l/V')^ !! ~ . 

Wartosci parametru V odpoujiadajqce ujartosciom 9i i 62 ujynoszq odpotuiednio = 4/3 oraz 
V'2 = 10/3. tatujo spratudzic, ze transformacja (1.65) nie zmienia stosunku ujiarygodnosci, tzn.: 

= ^M!L = 173,774 , (1.66) 
P(«2 = 10/3) = 3/10) 

Niezmienniczosc stosunku ujiarygodnosci: Zatem ujidac, ze stosunek ujiarygodnosci jest niezmien- 
niczy ze ujzgl^du na ujzajemnie jednoznaczq transformacji parametru. Gdyby transformacja parame- 
tru byia np. transformacja "logit" if) = ln(^/(l — 0)) lub parabolicznq if) = 9"^, to sytuacja takze nie 
ulegiaby zmianie. Roujniez uj ogolnym przypadku transformacji parametru tuiasnosc niezmienni- 
czosci stosunku wiarygodnosci pozostaje siuszna. Oznacza to, ze informacja zaiuarta uj probce jest 
niezmiennicza ze ujzgl^du na ujybor parametryzacji, tzn. poujinnismy bye uj takiej samej sytuacji nie- 
ujiedzy niezaleznie od tego jak zamodelujemy zjaujisko, o ile roznica uj modeloujaniu sproujadza si^ 
jedynie do transformacji parametru. W omaujianym przykiadzie poujinnismy roujnie dobrze moc 
stosouiac parametr 0, jak 1/9, 6*^, czy ln(^/(l — 9)). 

Uujaga o transformacji parametru uj statystyce Bayesoujskiej: Natomiast sytuacja ma si^ zupel- 
nie inaczej uj przypadku Bayesoujskiego podejscia do funkcji ujiarygodnosci [18], uj ktorym funkcja 
ujiarygodnosci uujzgl^dnia (Bayesoujski) rozkiad praujdopodobienstuja f{9\x) parametru 9. Oznacza 
to, ze Jakobian transformacji 9 ^ ip parametru, modyfikujqc rozkiad parametru, zmienia roujniez 
funkcji ujiarygodnosci. Zmiana ta zalezy od ujartosci parametru, roznie zmieniaj^c licznik i mianouj- 
nik UJ (1.64), co niszczy intuicyjnq ujiasnosc niezmienniczosci ilorazu ujiarygodnosci ze ujzgl^du na 
transformacji parametru [13]. 
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Rozdzial 2 

Entropia mzgl^dna i informacja Fishera 



W pozostaiych cz^sciach skryptu nie b^dziemy zajmoiuali sie modelami regresyjnymi. Oszaco- 
tuyujany ujektorotuy parametr 0, od ktorego zalezy funcja tuiarygodnosci P(0) ma postac 6 = 
(0i,^2,...,^7vf = (^n),li jak uj (1.4), gdzie On = (i9in,i92„„...,i9fc„/ = {{^st=i)n, skcjd liczba 
ujszystkich parametrouj tuynosi d = kx N. Aby nie komplikowac zapisu b^dziemy stosowali ozna- 
czenie Q = {9i,d2, 9d)'^ = {9i)i=i, gdzie indeks i = 1,2, d zastapii par^ indeksouj sn. 

Niech = (^1,62, .. .,9(1^ jest estymatorem MNW luektoroujego parametru = {61,62, ■■■,6d), 
otrzymanym po roztuiqzaniu ukiadu rotunan luiarygodnosci (1.8). Roztuiqzanie to, jako maksymalizu- 
jqce funkcj^ tuiarygodnosci, musi spelniac luarunek ujemnej okreslonosci formy kiuadratoujej ^ : 

t S!l(le=eA«.A«, . (2.2) 

gdzie przyrosty A^j, /S.6j nie zerujq si^ jednoczesnie. W przypadku skalarnym (tzn. jednego parametru 
Q = 6 = -d) luarunek ten oznacza ujemnosc drugiej pochodnej logarytmu funkcji luiarygodnosci u; 
punkcie 9 = 6. Wi^ksza ujartosc —-^\u.P{y\6) oznacza uj^zsze maksimum InP uj punkcie 
6 = 6, tzn. uji^kszq krzytuizn^ funkcji ujiarygodnosci, a co za tym idzie mniejszq niepeuinosc okreslenia 
parametru 6. 



2.1 Obserujoiuana i oczekiiuana informacja Fishera 

Ponietuaz moze bye in ogolnosci parametrem tuektoroujym, uji^c jako uogolnienie przypadku 
skalarnego zdefiniujmy d x d -ujymiaroujq macierz^: 

-(e)-^>"^(.ie) = -(^)^^^. (2.3) 



pelnym zapisie indeksom, ze ujzgl^du na to, ze jeden punktoujy parametr 9n — {"din, i?2n, 't^kn)"^ = {{'i^s)s=i)n 
moze bye parametrem luektoroiiiym, co ma miejsce gdy A: > 1, zapis (2.2) oznacza: 

n, n' — 1 s.s' — 1 

Wkrotce i tak ograniczymy si§ do sytuacji gdy k = 1, tzn. 9n — -ffin = 

^ B^dziemy pomszechnie stosomali skrocony zapis typu: O'^ = BB"^ = {9i9j)dxd oraz = g^^g^T = ( ae^ae )<ixd- 
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Okreslenie obserujoujanej informacji Fishera: Wartosc statystyki iF(0) zdefinioujanej jak w (2.3) uj 
punkcie 6 = (oznaczonq po prostu jako iF): 

iF=3F(e) = 3F (9)10^0 , (2.4) 

nazyiuamy obserwowanq informacjq Fishera. W teorii ujiarygodnosci odgryiua ona kluczoujq rol§. 
Jako statystyka, czyli funkcja proby Y, jej realizacja uj probce y = (yi, y2, YAf) jest macierzq licz- 
botuq. Z faktu ujyznaczenia iF uj punkcie estymatora MNW ujynika, ze jest ona dodatnio okreslona, 
natomiast z (2.3) ujidac roujniez, ze iF jest macierzq symetrycznq. 



We ujspoiczesnych ujykiadach iF jest zazujyczaj zapisane jako: 

~ f dlnP{e)dlnP{e) \ 

Obie definicje, tzn. (2.5) oraz (2.3), proiuadzq na poziomie oczekituanym do tych samych konkluzji, o 
ile / dy P(9) ^ ^^Jg^^^ =0, i = 1,2, ..,d (por. (2.31)). Zasadniczq zaietq zdefinioiuania iF poprzez (2.5) 
jest to, ze bardzo naturalne staje si^ tutedy luproiuadzenie tzuj. a-koneksji na przestrzeni statystycznej 
S [6]. Poj^cie Q-koneksji omoiuimy uj Rozdziale 2.2. 



Przykiad estymacji ujartosci oczekiujanej uj rozkiadzie normalnym: Jako przykiad ilustrujqcy 
zujiqzek ujielkosci obseruJOUJanej informacji Fishera (IF) z niepeujnosciq oszacoujania parametru, roz- 
ujazny realizacja proby prostej y dla zmiennej Y posiadajqcej rozklad (0, u^). 

Zalozmy, ze wariancja cj^ jest znana, a estymowanym parametrem jest jedynie wartosc oczeki- 
wana 9 = E (Y). Logarytm funkcji ujiarygodnosci ma postac: 



In Pm = -jH27ra^) - -L ^ (y„ _ e f (2.6) 

n=l 

skqd funkcja ujynikouja (1.9) jest roujna: 
f) 1 ^ 

5 (0) = - In P iy\e) = -^iy^-e). (2.7) 



n=l 



Rozujiqzujqc jedno rotunanie ujiarygodnosci, 5 = 0, otrzymujemy postac estymatora parame- 

tru 6 (por. (1.19)): 



N 

i 

y 



^Ey- (2-8) 

skqd: 



N 

n=l 



s{e) = ^ (e - e) . (2.9) 

Natomiast z (2.4) oraz (2.3) otrzymujemy, ze obserujoujana IF jest roujna: 

lnP{y\e) _ __N 
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Z (2.8) oraz z klasycznej analizy'^ [11] miemy, ze ujariancja: 

a\e) = a\y) = a^/N , (2.11) 
zatem: 

WW) = . (2.12) 

Wniosek: Otrzymalismy uji^c ujazny ziuiqzek moujiqcy, ze lui^ksza obsertuoiuana IF parametru 9 
oznacza mniejszq ujariancj^ jego estymatora 0. 

Roujnanie (2.12) mozna zapisac uj postaci: 

a^{e)iF{9) = 1 , (2.13) 

CO UJ przypadku estymacji ujartosci oczekiujanej rozkladu normalnego, jest sygnaiem osiqgni^cia dol- 
nego ograniczenia nierownosci Rao-Cramera [6]. Temat ten b^dziemy rozujijac dalej. 

Okreslenie oczekiujanej IF: Zdeliniujmy oczekiujanq informacj^ Fishera nast^pujqco: 

If (9) = Ee (3F(G)) = / dyP{y\e) 3F(G) , (2.14) 

Jb 

gdzie S jest przestrzeniq proby (ukiadu). Oznaczenie G uj indeksie luartosci oczekiujanej mouji, ze G 
jest praujdziujq ujartosciq parametru, przy ktorej generotuane sq dane y = (yi, y2, yat), natomiast 
element rozniczkoujy dy oznacza: 

dy = d'^y = dyidy2...dyN ■ (2.15) 

Oczekiujana v.s. obserujoiuana IF: Istniejq znaczqce roznice pomi^dzy oczekiujanq a obserujoiuanq 
informacj^ Fishera [13, 19]. Oczekiujana informacja Fishera Ip ma sens jako funkcja dopuszczalnych 
luartosci G, nalezqcych do przestrzeni Vq luartosci G. Natomiast jak to ujynika z MNW, obserujoujana 
informacja Fishera, iF(Q), ma zasadniczo sens tylko uj pobhzu Q. Jako zujiqzana z obserujoujanq ujar- 
tosci^ ujiarygodnosci, iF odnosi si§ do pojedynczego zestatuu danych i zmienia si^ od probki do probki. 
Oznacza to, ze nalezy o niej myslec jako o pojedynczej reahzacji statystyki iF(Q) uj probce, a nie jako 
o funkcji parametru G. Natomiast oczekiujana informacja Ip jest sredniq ujartosciq dla ujszystkich 
mozHujych zestaujouj danych uj caiej przestrzeni proby B, generoujanych przy praujdziujej ujartosci 
parametru. Zatem /^(G) jest nie tyle uzytecznym ujskaznikiem informacji dla konkretnego zbioru 
danych, ile funkcjq Q moujiqcq jak trudno jest estymoujac G, co oznacza, ze parametr z uji^kszq Ip 
ujymaga mniejszej probki do osiqgni^cia ujymaganej precyzji jego oszacotuania. 

Kontynuujqc rozpocz^ty poujyzej Przykiad rozkladu normalnego z estymacjq skalarnego parametru 
9, otrzymujemy po skorzystaniu z (2.10) oraz unormoujaniu funkcji ujiarygodnosci: 



dyPiy\9) = l, (2.16) 
ujartosc oczekiujanq IF dla parametru 9 rozkladu N{9,a'^): 

Ip{9) = I dyP{y\9)iFi9) = J dyP{y\9)^ = ^ . (2.17) 



Poniemaz dla proby prostej ujszystkie Y„, n — 1,2, N, maja taki sam rozkiad jak Y oraz dla n n' zachodzi 
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Ze ujzgl^du na (2.11) tuynik ten oznacza, ze zachodzi: 

a\e)lF{e) = 1 , (2.18) 

CO mouji, ze uj estymacji ujartosci oczekiiuanej rozkiadu normalnego osiqgamy dolne ogranicze- 
nie nierownosci Rao-Cramera [6]. Nieroiunosc ta daje najiuazniejsze ograniczenie statystyki infor- 
macyjnej na jakosc estymacji u; pojedynczym kanale informacyjnym. Spraujie nieromnosci Rao- 
Cramera postui^cimy cz^sc rozmazan skryptu. 

Przykiad estymacji obu parametrouj rozkiadu normalnego: Roztuazmy dujuparametroujy (d = 2) 
rozkiad normalny. Niech yi, yat jest realizacjq proby prostej dla zmiennej Y o rozkiadzie normal- 
nym N {jj., a). Ponietuaz 9^ = 9i dla n = 1,2, zatem ujektor parametrouj przyjmujemy jako 
= ii^r)'i=i)n=i = (^«)?=i = (/^' ^) ■ Funkcja ujiarygodnosci proby ma ujtedy postac: 



1 ^ 

In P (2/19) = -NHV2^a) - — (y„ . (2.19) 



n=l 



Funkcja ujynikouja z niq zujiqzana jest roujna: 

gdzie y = ;^ Z^^=i Yn jest sredniq arytmetycznq u; probie. Zatem postacie estymatorotu MNW, tzn. 
parametru ujartosci oczekiujanej ^ oraz odchylenia standardoiuego a zmiennej Y, otrzymujemy roz- 
ujiqzujqc ukiad roujnan ujiarygodnosci: 

S (0) le^e = ( ^i^sLy^ ) le^e = f ' 1 ^ (2-21) 
gdzie G = (/i, (t)"^ i rozujiqzanie to ma postac: 




/i = y oraz a 



1 ^ 

^ E - • (2.22) 



n=l 



Obserujoujana informacja Fishera (2.3) uj punkcie Q ujynosi uji^c: 



^(0) — \ 2N \ Af , "a v^Af f \2 le=e ~ n 2N ] ^ (2.23) 











V 


2N 




J 



W koncu oczekiujana informacja Fishera jest roujna: 

N 



lF{e)=EeiFie)= l^dyP{y\e)2F{G)= 1^-^ ^ j . (2.24) 

Uujaga o estymatorze cr^ MNW: Widzqc poujyzszy rozkiad jako N (/x, cj^) i uj konsekujencji przyj- 
muj^c tuektor parametrouj jako (/i, cj^)^, oraz przeproujadzajqc analogiczny rachunek jak poujyzej, 
mozna pokazac, ze estymator ujartosci oczekiiuanej ma postac fi = y, czyli tak jak uj (2.22), natomiast 
estymator luariancji ujynosi cr"^ = jj' J2n=i (^^ ~ y)^- ^ J^S*^ mianoujniku ujyst^puje czynnik N a 
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nie — 1 jak to ma miejsce uj przypadku nieobciqzonego estymatora luariancji. Estymator nie jest 
tez efektyujny (tzn. nie posiada najmniejszej z mozliujych tuariancji). Jednak ujiasnosci te posiada on 
asymptotycznie {N — ^ oo), co jest charakterystyczne dla ujszystkich estymatorouj MNW [11]. 
Spraujdzenie, ze przy odpotuiednio dobranych tzuj. oczekiiuanych parametrach rozkiadu normalnego, 
estymacja obu parametrouj jest efektytuna dla skonczonego N, pozostaujiamy jako cujiczenie na ko- 
niec tego rozdziaiu, po tym jak zapoznamy si^ z poj^ciem dualnych ukiadou; ujpoirzQdnych. 

2.1.1 Wartosc oczekituana i tuariancja funkcji ujynikoujej 

Pokazmy, ze ujartosc oczekiujana funkcji ujynikoujej S{Q) = S{Y\Q), tzn. gradientu logarytmu 
naturalnego funkcji ujiarygodnosci, jest roujna zeru: 

EeS{e) = 0. (2.25) 

Istotnie, gdy skorzystamy z interpretacji funkcji ujiarygodnosci jako iqcznego rozkiadu praujdopodo- 
bienstuja i jej unormoujania do jednosci, ujtedy: 

EeSie) = j^dyP{y\Q)S{Q) = j^dyP{y\Q)(^-^\nP{y\Q) 

gdzie zakres caikoujania obejmuje caiq przestrzen proby B. W przypadku gdy pierujotna zmienna Y 
jest dyskretna, poujyzszy doxuod przebiega podobnie. 

Zaiozenie o regularnosci rozkiadu: W (2.26) ujyciqgn^Iismy rozniczkoujanie po parametrze przed 
znak caiki. Popraujnosc takiego przejscia oznacza speinienie zqdania, aby rozkiad P {y\Q) byi luystar- 
czajqco giadki jako funkcja [13]. Oznacza to, ze nie maze bye brzegowq wartoseiq, tzn. istnieje 
taha funkeja g [y] (ktorej ealka g (y) dy jest skonczona), dla ktorej w sqsiedztwie prawdziwej 
wartosci parametru zachodzi \dP {y\@)/dQ\ < g {y) gdy dP/d@ jest traktowana jako funkcja 
y [13], skqd ujynika skonczonosc caiki dy dP (y|0) /dQ. 
Zauujazmy roujniez, ze przy odpoujiednim ujarunku regularnosci: 

Tirierdzenie o luariancji funkcji ujynikoujej: Zakiadajqc tuarunek regularnosci pozujalajqcy na tuy- 
ciqgni^cie rozniczkoujania po parametrze przed znak caiki, mozna pokazac, ze ujariancja (precyzyjnie, 
macierz ujariancji-koujariancji) funkcji ujynikoujej 5(0) = S{Y\Q) jest roujna oczekiujanej IF'^: 

a% S (e) = If{@) ■ (2.28) 

Zauujazmy, ze z poujyzszego ujynika, ze d x d-ujymiarouja macierz informacji /f(0) jest macierzq 
koujariancji, co oznacza, ze jest ona nieujemnie okreslona^. 



*Poniemaz funkcja mynikoma S{Q) = S{Y\Q) = ^^^i^^^ jest d-mymiaroiuym kolumnoiuym mektorem losoirym (1.9) 
z ujartosciq oczekimanq romnq zero, zatem Cove (y\Q^^ jestdx d-iuymiaroujq macierzq komariancji (mspoirz^dnych) 
ujektora ^(y |B). W skrypcie b^dziemy stosoiuali oznaczenie cr e S{e) = Cove [s (^1©)]- 

^Dla doiDolnego luektora a — (ai, a^)"^ £ R'' oraz macierzy koiuariancji C — E y{Z — E{Z)) (Z — E(Z))'^ ^, 

gdzie Z jest d-irymiaroujym luektorem losomym, zachodzi a.^ E \{Z - E{Z)) {Z - E[Z)f^ a = a^E (WW^) a = 
E [(a^ W)(a^W)^] = cr^ (a^W) > 0, gdzie W ^Z ~ E(Z) i E{W) = 0, tzn. macierz C jest nieujemnie okreslona. 
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Doujod tujierdzenia (2.28). Korzystajqc z (2.25) otrzymujemy: 



dy P {y\Q) {S (Q) - EeS {e)f 



(2.29) 



dyP{y\Q){S{e)y 
d 



dyP{y\Q) ( ^lnP(yie) 



dyP{y\e) 



1 2 



P{y\e) /P{y\e) 



dy 



n 2 



dQ 



P{y\Q) 



/P{y\e) 



Natomiast korzystajqc z (2.27) otrzymujemy: 

If{@) = EeiFiQ) = dyP {y\@) 3F(e) = - J dyP {y\e) 



QQ2 



lnP{y\Q) 



dyP{y\Q) 



dyP{y\Q) 



P{y\Q)\/P{y\Q) 



d_ 

(lLp{y\Q))p[y\Q) + {^p{y\Q)f 



d_ 



CO poroiunujqc z (2.29) konczy douJod tujierdzenia (2.28). 



dy 



d& 



Piy\e) 



(2.30) 



/Piy\e), 



Wniosek: Doujodz^c (2.25) okazaio si^, ze przy zaiozeniu ujarunku reguralnosci, tuartosc oczekiujana 
na przestrzeni proby z funkcji ujynikoujej zeruje si^, tzn. EqS (0) = i rezukat ten jest siuszny dla 
ogolnego przypadku ujektoroujego. Z (2.28) ujynika romniez, ze macierz luariancji-koujariancji funk- 
cji ujynikoujej jest roujna IF, tzn. a'^eS (0) = If{Q), co jak spraujdzimy ponizej, ma znaczenie dla 
dodatniej okreslonosci metryki Fishera gij w teorii pola. Skoro roujnosci (2.25) oraz (2.28) zachodzq 
dla przypadku mektoroujego, zatem sq one rouiniez siuszne uj przypadku skalarnym. 

Cujiczenie: Przedstaiuione doiuody dla luiasnosci (2.25) oraz (2.28) byiy ogolne. Spratudzic bezpo- 
srednim rachunkiem, ze zachodz^ one dla (2.20) oraz (2.24) uj potuyzszym przykiadzie estymacji obu 
parametrouj rozkiadu normalnego. 

Wazny zujiqzek: Z (2.29)-(2.30) ujidac, ze przy speinieniu ujspomnianych ujiasnosci regularnosci, 
zachodzi: 



7^(6) = EeiFiO) = - IjyP (y|e) InP (y|e)) = J^dyP 



{y\Q) 



^lnP(yie) 



(2.31) 



Utuaga o dodatniej okreslonosci obserujotuanej IF: Niech g^j elementami d x d - tuymiarotuej 
macierzy Z (2.31) otrzymujemy dla doujolnego c? - ujymiaroujego ujektora v = {vi,V2-, ...,Vd)'^- 

d d „ d 



..T 



i=i j=i 



B 



i=l 



CO oznacza, ze oczekiujana informacja Fishera /f(0) jest dodatnio poiokreslona [13], jak to zazna- 
czylismy ponizej (2.28). Jednak uj teorii pola interesuje nas zaostrzenie ujarunku (2.32) do ujiasnosci 
dodatniej okreslonosci. 
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Z (2.28) (lub (2.31)) ujidac roujniez, ze uj teorii pola, ktorq daioby si^ sformulowac dla ciqgtych, 
regularnych, unormowanijch rozhladow, co pociqga za sobq ciqgiosc rozkiadu funkcji mynikoiuej 
na caiej przestrzeni proby B, macierz If{Q) jest okreslona dodatnio. 

Ponieiuaz w Rozdziale 2.2 ziurocimy uujag^ na fakt, ze oczekiiuana IF okresla tztu. metryk^ Fishera- 
Rao (gij) := If{@) na przestrzeni statystycznej S, zatem: 

W teorii pola z ciqglymi, regularnych i unormowanymi rozktadami, metryka Fishera-Rao gij jest 
dodatnio okreslona. 

2.2 Wst^p do geometrii rozniczkoiuej na przestrzeni statystycznej i a-koneksja 

Niech zbiorem punktou; Q reprezentujqcych konfiguracj^ ukiadu b^dzie przestrzen proby ukladu 
B. Np. UJ przypadku proby jednoujymiaroujej B = y, gdzie y jest zbiorem ujszystkich mozliujych 
ujartosci y zmiennej losoujej Y. Niech P jest miarq probabilistycznq (praujdopodobiehstujem) na B. 
Zbior uJSzystkich miar na B oznaczmy T,{B) i nazujijmy przestrzeniq stanow modelu. 

Okreslenie modelu statystycznego: Rozujazmy podzbior S C na ktorym jest zadany ukiad 

ujspoirz^dnych [6] tak, ze S jest rozmaitosciq^. Niech na B okreslony jest d - ujymiaroujy 

model statystyczny (tzn. para (y, P)), a precyzyjniej: 

S = {Pe^ P{y\E), E = (Dti eVEC M'^} , (2.34) 

tzn. rodzina rozkiadou; praujdopodobiehstuja parametryzoiuana przez d nielosoujych zmiennych o 
ujartosciach rzeczyujistych {C)i=i nalezqcych do przestrzeni parametru Ve, b^dqcej podzbiorem R'^. 
Moujimy, ze 5 jest d - luy miaroiu^ przestrzeniq statystycznq. 

Notacja: Ponieiuaz u; danym modelu statystycznym ujartosc parametru E okresla jednoznacznie roz- 
kiad praujdopodobiehstuja P jako punkt na S, uji^c ze ujzgl^du na ujygod^ i o ile nie b^dzie to pro- 
ujadziio do nieporozumieh, sformuiotuania (punkt) Pe & S oraz (punkt) E e S b^dziemy stosoxuali 
zamiennie. 

Uujaga o niezaleznosci P od parametryzacji: Oczyujiscie rozkiad praujdopodobiehstuja nie zalezy 
od ujyboru bazy uj przestrzeni statystycznej S, tzn. gdyby np. Q by! innym ukiadem ujspoirz^dnych 
(innq parametryzacji) to P = Pq = P{y\Q) = Pe = P{y\E) dla kazdego P e S. 

^ Niech S jest zbiorem punktom, na ktorym okreslony jest ukiad ujspoirz^dnych (j>s '■ S M.''. W skrypcie interesujq 
nas tylko globalne uklady luspolrz^dnych. Wtedy (j>s odujzoroujuje kazdy punkt P £ <S m zbior d liczb rzeczyujistych 

MP) = ie{p),eip),-,e{p)f = {e,e, -.ct = s. 

Niech istnieje zbior ukiadouj ujspoirz^dnych (czyh atlas) A speiniaj^cy nast^puj^ce marunki: 

1) Kazdy element 0= = G A, jest inzajemnie jednoznacznym odiuzoroujaniem 0= : 5 — > R** z iS ui peiuien 
otiuarty podzbior w R'*. 

2) Dla kazdego (fis € A oraz luzajemnie jednoznacznego odmzorouiania 0=/ zS w R**, zachodzi 
roujnoujaznosc: = ')f=i € A) {(j>s' ° j^st dyfeomorfizmem rz^du C°°). 

Zbior S z tak okreslonym atlasem A to {C°° rozniczkowalna) rozmaitosc . (2.33) 
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Okreslenie macierzy informacyjnej Fishera: Wproiuadzmy oznaczenie: 

d 

1^ = l{y \E) = In Pb oraz 9, = ^ i = 1,2, ...,d . (2.35) 

Dla kazdego punktu P^, d x d - tuymiaroiua macierz {gij{E)) o elementach: 

gij{E) := E^idiiEdjiE) = [ dy P{y\E) dil{y\E)djl{y\E) , i,j = 1,2,..., d, VPh G 5 , (2.36) 

JB 

jest nazyujana macierzq informacyjnq Fishera naS w punkcie P-. [6]. Wielkosc oznacza tutaj 

luartosc oczekiiuanq, a caikoiuanie przebiega po caiej przestrzeni proby B. 

Przy zaiozeniu speinienia luarunkouj regularnosci (porotunaj (2.31)), macierz {gij(E)) moze zostac 
zapisana nast^pujqco: 

gij = -EBididjiE) = - [ dyP{y\E)d,dj In P{y\E) , i, j = 1,2, ...,d , y P^ € S . (2.37) 

Jb 

Metryka Fishera: Macierz informacyjna Fishera okresla na S iloczyn lueiun^trzny nazytuany metrykq 
Fishera {, ) na S, definujqc go lu ukiadzie ruspoirz^dnych {C)i=i poprzez ziuiqzek: 

d 

{di,dj) := gij , gdzie wektory bazowe di = , i = 1,2, ...,d , M P-= ^ S . (2.38) 

Metryka gij Fishera-Rao jest metrykq typu Riemannoruskiego''. Warto zauiuazyc, ze na rozmaitosci 
S mozna zdefinioujac nieskohczonq Hczb^ metryk Riemannoujskich. Jednak Chentsov pokazai, ze 
metryka Fishera-Rao jest ujyrozniona sposrod ujszystkich innych tym, ze (z dokiadnosciq do staiego 
czynnika) jest ona jedynq, htora jest reduhowana {w znaczeniu zmniejszania si^ odlegiosci doujol- 
nych dujoch stanoiu) w kazdym stochastycznym odwzorowaniu [20, 21]. 

Okreslenie koneksji afinicznej: Oznaczmy przez Tp przestrzeh stycznq do 5 uj punkcie P= G S. 
Kazdy ujektor V eTp mozna roziozyc na ujektory bazouje {di)p: 
d 

V = Y^ V\di)p , gdzie V €Tp , VPs G 5 , (2.43) 

1=1 



^ Okreslenie przestrzeni Riemannourskiej: Niech <S jest rozmaitosci^ i zalozmy, ze dla kazdego punktu Ph € <S m jej 
przestrzeni stycznej Tp = Tp{S) jest okreslony iloczyn lueiun^trzny (,)p taki, ze {V,W)p G R oraz posiadaj^cy dla 
doujolnych mektoroiu V,W £ Tp nast^pujqce inlasnosci: 

(Va,6eR) {aV + bW,Z)p = a{V,Z)p+b(W,Z}p liniowosc (2.39) 

{V,W)p = {W,V)p symetrycznosc (2.40) 

Jesli V , wtedy {V,V)p>0 dodatnia okreslonosc . (2-41) 

Pieruisze diuie lulasnosci oznaczajq, ze {,)p jest formq duiuliniouj^. Oduizoroinanie g : S B P ^ {,) p jest na S polem 
uiektoroLuym (kouiariantnym) rangi 2. Nazyuiamy je metrykq Riemanna na S, a przestrzen S, z tah ohreslonq metrykq 
g, nazywamy przestrzeniq Riemannowskq (<S, g). 

Gdy dla kazdego P £ S luspoirz^dne V^, i = 1,2, d douiolnego luektora V £ Tp sq C°° (tzn. sq analityczne) tnzgl^dem 
peiunego ukiadu luspoirz^dnych H, uitedy metryka Riemanna jest C°°. W skrypcie roziuazamy tylko przypadek C°°. 
Maj^c metrykq g mozemy zdeflnioiuac dlugosc tuektora stycznego V przez niq indukoiuanq: 

d 

\\V\\ ^^{V,V)p= J2 g^Am^V^ ■ (2.42) 
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gdzie dolny indeks p oznacza zaleznosc ukiadu tuspoirz^dnych di = i = 1,2, ...,d, od punktu 
-Ph G S. 

Niech 7pp/ oznacza sciezk^ u; S iqczqcq punkty P oraz P'. Przyporzqdkujmy, kazdej sciezce 7pp' 
uj 5, odtuzoroujanie H^^^, : 

7PP' ^ n^^^, -.Tp^Tp, , V Ph i P^ G 5 , (2.44) 

ktore przeksztaica ujektory z przestrzeni ujektoroujej Tp do przestrzeni ujektoroujej Tp/. 

Roztuazmy trzy doujolne punkty P, P' oraz P" uj 5, oraz sciezki jpp' z punktu P do P' i 7p/p// 
z P' do P". Mowimy, ze przeksztalcenie U jest konehsjq afinicznq jesli: 

'n^pp,, = n^p,p„ ° n^pp, oraz = n^pp = id , V Ph i P4 G 5 , (2.45) 

gdzie id jest przeksztaiceniem identycznoscioujym. 

Aby okreslic postac linioujego odujzoroujania Ilpp> pomi^dzy Tp a Tpr musimy, dla kazdego i G 
1, 2, d, okreslicnpp/((9j)p) jakoliniouj^kombinacj^ujektoroujbazoujych {di)pr, {d2)p', {ddjpi 
UJ Tpi. 

Okreslenie przesuni^cia roirnolegiego: Niech Vp b^dzie ujektorem stycznym uj P. Wektor Vp pi 
nazyujamy rownolegtym przesuni^ciem wektora Vp z P do P' ujzdiuz krzyujej (sciezki) 7pp', ujtedy 
gdy: 

Vp ^ Vppi := U^pp, Vp, V Ph i P^ G 5 . (2.46) 



Okreslenie roujnolegiosci ujektorouj: Dwa wektory Vp oraz Vpi styczne do S w punktach P i P' 
sq rownolegie, jesli roujnolegie przesuni^cie (okreslone uj (2.46)) ujzdiuz ujskazanej krzyujej 7 jed- 
nego z nich, potuiedzmy Vp, do punktu P' "zaczepienia" drugiego z nich, da ujektor Vpp', ktory jest 
proporcjonalny do Vpi (i na odujrot). 

Koneksja afiniczna pozujala zdefinioujac pochodnq koujariantnq uj nast^pujqcy sposob. Niech V 
jest doujolnym ujektorem uj przestrzeni stycznej Tp, oraz niech ^{t), gdzie t G (0, 1), oznacza do- 
ujolnq sciezk^ z P do P' uj 5, ktora ujychodzi z P uj kierunku W G Tp. 

Pochodnq koujariantnq (koneksji afinicznej H) ujektora V w punkcie P i uj kierunku W ^ Tp 
definiujemy nast^pujqco: 

' ^'^^''^ l{t = 0) = P , VPhGcS. (2.47) 

Poj^cie pochodnej koujariantnej poziuala ujypoujiedziec si^ co do roujnolegiosci ujektorouj uj punk- 
tach P i P'. 

Okreslenie geodezyjnej: Geodezyjnq nazyujamy takq krzyujq 7 uj 5, ktorej ujszystkie ujektory styczne 
sq do siebie roujnolegie. W zujiqzku z tym moujimy, ze geodezyjna jest samo-rownoleglq krzyujq uj 
S. 
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Wspoiczynniki koneksji: Konkretna analityczna postac ujspoiczynnikoiu koneksji must bye podana 
przy ustalonej parametryzacji^ H — > P, tzn. u; okreslonym ukiadzie ujspoirz^dnych E = {C)i=v 
Zakiadajqc, ze roznica pomi^dzy Ilpp'{{dj)p) oraz {dj)p' jest infinitezymalna, i ze moze bye myra- 
zona jako linioiua kombinacja rozniczek d^^, d^^, d^'^, gdzie: 

dc = e{p)-e{p') , i = i,2,...,d, (2.50) 

mamy: 

d 

Upp,{{d,)p) = {dj)p, - de{rlj)p{di)p: , j = 1,2, ...,d, P^iPLeS, (2.51) 

i,l=l 

gdzie {T\j)p, i,j,l = 1,2, ...,d, d^ wspolczynnikami koneksji zaiezqcymi od punktu P. Konek- 
sji afinicznq H, uji^c i ujspoiczynniki koneksji, mozna (przy ustalonej parametryzacji H) okreslic na 
rozne sposoby. Jeden z nich zujiqzany z koneksjq Levi-Civita podany jest w (2.78). Jednak w analizie 
na przestrzeniach statystycznych szczegolnie uzyteczna okazaia si^ tzuj. a-koneksja. 

a-koneksja: W kazdym punkeie P-= G S, a-koneksja zadaje d^ funkcji \ '■ E — ^ ix'tfr)'^^ hJ^i" = 
1, 2, d, przyporzqdkoujujqc mu uJspoiczynniki koneksji o nast^pujqcej postaci [6]: 



Koneksja a jest symetryczna, tzn.: 



yP^eS. (2.52) 



^lti = '^'j^\^ i,j,l = h2,-,d, VPhGcS. (2.53) 

W koncu, jesli g^^ (P) jest (i, j)-skiadoujq macierzy odvurotnej do macierzy informacyjnej {gij{P)), 
to ujspoiczynniki r^^*-"^ sq roiune: 



rl/"^ = E^^''rg) , i,j,r = l,2,...,d, VPhG5. (2.54) 

1=1 



®Niech A = {S')f^i jest innym niz ^ = ukladem luspoirz^dnych (innq parametryzacji) i niech dj = g|j = 

X^iLi fir '^i- Mozna pokazac, ze mspolczynniki koneksji in ukladach luspofcz^dnych A oraz H ziuiqzane ze sobq nast^- 
pujcjco [6]; 

^rs= ^ [^'^WW + WdS^W *'-'^ = l'2,...,d. (2.48) 

Drugi skladnik uj (2.48) zaiezy tylko od postaci transformacji ujspoirz^dnych i jest niezalezny od koneksji. Zatem, za myj^t- 
kiem transformacji linioujej, dla ktorej drugi skladnik znika, ujspoiczynniki koneksji nie transformujq si§ przy przejsciu do 
noLuego ukladu mspolrz^dnych jak ujielkosc tensoroiua. Gdyby ini^c w ukiadzie luspoirz^dnych H = {^')f^i uiszystkie 
r\j = 0, to (za myjqtkiem transformacji linioujej) lu noujym ukiadzie tnspoirz^dnych A = {S')f^i nie luszystkie ujspoi- 
czynniki r* a byiyby roujniez roiune zero. 

Jednakze postac koneksji aflnicznej 11 jest lu noiuej parametryzacji taka sama jak (2.51), tzn. jest ona ujspoizmiennicza, co 
oznacza, ze; 

d 

npp,{{d,)p) = (d,)p, - Yl d5\r\^)p{di)p, , gdzie j = 1,2,.. .,d oraz dS' = S'iP)~5\P') . (2.49) 

i, 1 = 1 
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a - pochodna koujariantna: Majqc metryk^ Fishera-Rao gij, (2.38), zdefiniujmy a - pochodnq kouja- 
riantnq V^"^ na S poprzez a-koneksj^ afiniczn^ nast^pujqco: 

(V^f 9„ 9,) := rg , i,3,l = l,2,...,d , yP^eS. (2.55) 

Poujyzej, poprzez koneksj^ afinicznq zdefinioiualismy pochodnq kotuariantnq. Ale i odiurotnie, po- 
chodna koujariantna definiuje koneksj^ [6]. Stqd np. moujimy, ze okreslilismy koneksj^ V. 

Pole luektorouje na S: Niech V : P ^ Vp jesi odujzoroiuaniem przyporzqdkoiuujqcym kazdemu 
punktouji P e S ujektor styczny Vp G Tp{S). Odujzoroujanie to nazyruamy polem wektorowym. Na 
przykiad, jesli jest ukiadem tuspoirz^dnych, ujtedy przyporzqdkoujanie ^ : P — > (^^) > 

i = 1, 2, d, okresla d pol tuektoroujych na S. 

Oznaczmy przez T{S) rodzin^ tuszystkich pol ujektoroujych klasy C°° typu Vp = Yli=i ^p {di)p S 
Tp {S) na S, gdzie d funkcji : P ^ Vp nazyujamy ujspolrz^dnymi pola ujektoroujego V ze ujzgl^du 
na (e)ti. 

Okreslenie pochodnej koiuariantnej pola ujektoroiuego: Roztuazmy diua pola tuektoroiue V,W e 

T{S). Niech u; bazie iC)f=i pola te maj^ postac V = Yfi=i ^'di oraz W = J2i=i ^'^i. Pochodnq 
koujariantnq pola V ze ujzgl^du na W nazyujamy pole ujektorouje ViyF G T{S), ktore u; bazie 
{Oi=i ma postac: 

d d d 

VwV = ^ ^ { diV^ + V' V% ]dk, yP^eS. (2.56) 

i=l k=l j=l 

Przyjmujqc W = di oraz V = dj iattuo spratudzic, ze ztuiqzek (2.56) daje: 

d 

= ^ r^. , vphGcS, (2.57) 

k=l 

CO po skorzystaniu z (2.54) jest zgodne z okresleniem koneksji V w (2.55). 
Mozna pokazac [6], ze zachodzi: 

V(") = l±^vW + i^v(-i), VPhGcS. (2.58) 

Utuaga o piaskosci S ze ujzgl^du na V: Moujimy, ze ukiad ujspoirz^dnych jest afinicznym 

ukiadem wspolrz^dnych dla koneksji V gdy zachodzq (rorunoujazne) ujarunki: 

Vg^dj = lub rownowaznie = i,j,l = 1, 2, d , VPs G 5 . (2.59) 

Jesli dla zadanej koneksji V odpoujiadajqcy jej ukiad ruspoirz^dnych jest afiniczny, to moruimy, ze 
koneksja V jest piaska'' lub, ze przestrzen statystyczna S jest plaska ze wzgl§du na V. 



ogolnosci, znikanie koneksji jest marunkiem my starczajqcym lecz niekoniecznym afinicznej piashosci, htora w bar- 
dziej fundamentalnym okresleniu ma miejsce, gdy tensor hrzywizny (Riemanna) R zeruje sif na calej rozmaitosci S, 
tzn. zerujq si§ ujszystkie jego skiadouje. Skiadoiue tensora krzyujizny R ui bazie {C)i-i majq nast^pujqc^ postac: 

d d 

i?^,fc = i?J,fe(r) = a;r^„-a,r!„ + ^rLrj\, -^r^.Hfc, \fPses. (2.60) 

3=1 3=1 

Gdy na rozmaitosci <S istnieje globalny ukladu mspoirz^dnych, lutedy dla koneksji, ktora jest symetryczna (tak jak np. a- 
koneksja), znikanie tensora krzyinizny pociqga istnienie ukiadu tuspoirz^dnych, lu ktorym znika koneksja i oba okreslenia 
afinicznej plaskosci pokryujaj^ si§. 
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Piaskosc S ze tuzgl^du na V oznacza, ze luszystkie ujektory bazoiue di = i = l,2,...,dsq rouj- 
nolegie na caiej przestrzeni S. 

Modele z koneksjq V'-"'', ktore a = +1 bqdz —1 piaskie, odgrytuajq szczegoinq rol^ lu modelo- 
ujaniu statystycznym [13]. 

Duja przykiady rodzin rozkiadouj prairdopodobieristuja: Istniejq dma przypadki rodzin modeli 
statystycznych, szczegolnie istotnych u; badaniu podstaujoujych geometrycznych ujiasnosci modeli 
statystycznych. Piertusza z nich to rodzina rozkladouj eksponentialnych, a druga, rozkladouj miesza- 
nych. 



Rodzina modeli eksponentialnych okazuje si^ tuyjqtkotuo tuazna, nie tylko dla badania lulasnosci 
statystycznych, ale roujniez u; zuji^zku z jej realizacjq lu szeregu zagadnieniach fizycznych. Niech ujiel- 
kosc proby = 1. Niech zmienna losouja Y b^dzie zmiennq typu ciqgiego lub dyskretnego. Ogolna 
postac regularnej rodziny rozkladouj eksponentialnych^*' jest nast^pujqca: 



PE = p(j\^) = exp 



i=l 



exp 



i=l 



h{y), (2.61) 



gdzie i = 1,2, d, s^ tzm. parametrami hanonicznymi, natomiast h{y) 
ujemnq funkcjq, ktora nie zalezy od ujektoroujego parametru E. 
W (2.61) pojaujiia si^ d-ujymiarouja statystyka: 



FiY) = iF,{Y),...,F,iY))' 



exp(C(y)) jest nie- 



(2.62) 



nazyujana statystykq kanonicznq. 



Caikujqc obustronnie (2.61) po przestrzeni proby B = y, a nast^pnie tuykorzystujqc ujlasnosc nor- 
malizacji fydyp{y\E) = 1, otrzymujemy^^: 



ipCE) = In / dy exp 

Jy 



C{y) + Y.eF^iy) 



1=1 



(2.63) 



Modele eksponentialne sq a = 1 - piaskie, co oznacza, ze [6]: 

(^ij^fc)s = , dla modeli eksponentialnych , VPs £ 5 . (2-64) 

Istotnie, korzystajqc z oznaczenia ujproujadzonego uj (2.35), otrzymujemy dla modeli zadanych przez 
(2.61): 

dl{y\^) p. . dm) (,rr. 



'"Zlogarytmoujane modele eksponentialne {Inps, H = {£^')f^i £ Vb C R'*} przestrzeniami afinicznymi. Dlatego 
z punktu ujidzenia ich geometrycznej charakterystyki odgrymajq takq rol§ jak proste i poiuierzchnie m 3-ujymiaroiuej 
geometrii Euklidesoiuej. 

^'punkcja ipiS.) okazuje si^ bye tzm. potencjalem transformacji Legendre'a pomi^dzy affinicznymi ukladami ujspoirz^d- 
nych modeli eksponentialnych (por. Rozdzialy 2.2.2.1 oraz 2.8.1). 



40 



skqd (przy okazji) otrzymujemy obsermoujanq informacj^ Fishera dla rozkiadouj eksponentialnych u; 
parametryzacji kanonicznej: 

d^l{y\E) 



Podstatuiajqc (2.66) do (2.52), otrzymujemy dla a = 1 ujspoiczynniki 1-koneksji, roujne: 



(2.66) 



(r 



0, VPhG5, (2.67) 



gdzie uj ostatniej roiunosci skorzystano z (2.25) dla funkcji xuynikoiuej. 



Ponadto dla modeli eksponentialnych z (2.37) oraz (2.66) otrzymujemy nast^pujqcq postac metryki 
Fishera-Rao: 



9ij 



Zujrocmy uujag^ na roujnosc praujych stron (2.66) oraz (2.68) dla rozkiadou; eksponentialnych. 



(2.68) 



Przykiadami modeli z eksponentialnej rodziny rozkiadouj sq: 
i) Rozklad normalny, (1.16), p {Y = y|/i, cr^) — — - — I _(y^zA. 



7^ 



C(y) = 0, Fi(y) = y, F2(y) = y^ , = 4 > C 



2<t2 
2 _ 



, y G R, dla ktorego: 
1 

2^ ' 



(2.69) 



ii) Rozklad Poissona (1.33), p{Y = y|/z) = ^^'^^^ ^) ^ gdzie y = 0, 1, oo, dla ktorego: 

C(y) = -ln(y!) , F(y) = y , e = ln/^, ^(e) = ^ = expe. (2.70) 



iii) (Standardowy) rozktad eksponentialny, p {Y = y\fi) = fi ^ exp(— y/^) , gdzie y > 0, dla kto- 
rego: 



C{y)=0, F{y)=y, ^ = -- , V'lO = In^* = ln(-^) . 



(2.71) 



Modele eksponentialne ujyroznia fakt osiqgania dolnego ograniczenia nieroxunosci Rao-Cramera [21] 
(poroujnaj zuji^zek (2.18)). 

Wymiar statystyki dostatecznej dla (2.61): Dla modeli eksponentialnych zachodzi uiazna ujlasnosc 
zujiqzana z ujymiarem statystyki kanonicznej F{Y), (2.62). Rozujazmy A^-elementoujq prob^ Y = 
0^n)n=v dla ktorej kazdy punktoujy rozkiad ma postac (2.61). Wtedy funkcja ujiarygodnosci dla proby 
jest nast^pujqca: 



P{y\E) = exp 



N 



i=l n=l 



exp 



N 



n=l 



(2.72) 
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Dostateczna statystyka dla tuektoroujego parametru oczekiujanego gdzie 9i = E-= [Fi{Y)], 

i = 1,2, ...,d (por. (2.237) uj Rozdziale 2.8.1) ma zatem postac: 

(TV AT N \ 

Y.F,{yn),Y,F2{yn),...,Y.F,{y.,)] . (2.73) 
n=l n=l n=l / 

Jej ujymiar jest roiuny d i jak midac, dla konkretnych reprezentantotu ogolnej rodziny eksponentialnej 
nie zalezy on od mymiaru proby N. Wiasnosc ta nie jest speiniona np. dla takich nieeksponentialnych 
rozkiadouj jak rozkiadu Weibull'a oraz Pareto [11], dla ktorych mymiar statystyki dostatecznej rosnie 
mraz z mymiarem proby. Innq mazn^ miasnosci^ rozkiadom nieeksponentialnych jest to, ze dziedzina 
(tzn. nosnik) ich funkcji g^stosci moze zalezec od parametru. 

Rodzina mieszanych rozkiadoiu praiudopodobienstuja: 

d 

PA = p(y| A) = C(y) + ^'F,{y) , (2.74) 

i=l 

gdzie 5* sq tzuj. parametrami mieszanymi. 

Cujiczenie: Pokazac, ze przestrzeh statystyczna rodziny rozkiadoiu mieszanych jest a = —I - pia- 
ska [6]: 

(r^j = , dla modeli mieszanych , VPs £ 5 . (2-75) 

Geometria przestrzeni S a parametryzacja: Jako miasnosci geometryczne przestrzeni S przyjmu- 
jemy te, ktore sq niezmiennicze ze ujzgl^du na zmian^ parametryzacji. 

Np. ujiasnosci geometryczne rodziny modeli eksponentialnych nie zalezq od tego czy posiuzymy si^ 
parametrami kanonicznymi {C)i=i czy oczekimanymi di = £'= [Pj(y)], i = 1,2, d (por. (2.237)). 

2.2.1 Przestrzen statystyczna dualnie piaska 

Z (2.36) oraz (2.52) mynika, ze: 

dr9^ = r% + T%, yPE^S, (2.76) 

CO oznacza, ze 0-koneksja jest metryczna^^ ze ujzgl^du na metryk^ Fishera-Rao [6]. 



'^Koneksja metryczna: Poprzez metryk^ Riemannomsk^ g, ktorej przykladem jest metryka Fishera-Rao, (por. Roz- 
dzial 2.2), mozna okreslic koneksj^ 7pp' ^ippi ' ktora jest metryczna na S. Z honehsjq metrycznq mamy do czynienia 
gdy: 

9p' (n-,^p, V, n-,^^, W) =gp{V,W), V Ps i P4 € 5 , (2.77) 

tzn. gdy iloczyn wewn^trznn jest niezmienniczy ze wzgl^du na przesuni^cie rownolegle dla irszystkich luektoroiu stycz- 
nych V oraz W i luszystkich sciezek 7 z P do P'. 

Koneksj^ metryczn^ nazymamy honehsjq Levi-Civita (lub Riemannoujskq), jesli jest ona zaroiuno metryczna jak i syme- 
tryczna. Dla zadanego g koneksja taka jest okreslona jednoznacznie jako: 

Tii, fc = ^ (diQik + djgki - dkQij) , VPs G 5 , (2.78) 
gdzie jej symetria oznacza spelnienie luarunku (2.53). Koneksja (2.78) spetaia luarunek (2.76). 
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Jednak w ogolnosci dla a ^ 0, a-koneksja afiniczna nie jest metryczna, natomiast spelnia wa- 
runek dualnosci omoujiony ponizej. 



Koneksje dualne: Niech na rozmaitosci S zadana jest peiuna metryka Riemannotuska g = {,) i dwie 
koneksje V oraz V*. Metryka ta moze bye np. metrykq g Fishera-Rao. Jesli dla tuszystkich pol mek- 
toroujych V,W,Ze T{S), zachodzi: 

Z{V,W) = {VzV,W) + {V,V*zW) , VPhG5, (2.80) 

tutedy moujimy, ze V oraz V* ze ruzgl^du ma metryk^ (, ) dualne (sprz^zone) xuzgl^dem siebie. W 
ukiadzie ujspoirz^dnych (C)iLi metryka g ma ruspoirz^dne gij, a koneksje V oraz V* majq luspoi- 
czynniki koneksji odpoiniednio Fjj oraz ,,. 
Warunek dualnosci (2.80) mozemy teraz zapisac u; postaci^'^: 

drgij = Tri, j + r;^- i, V Ph G cS , (2.82) 

b^dqcej uogolnieniem ujarunku (2.76) istniejqcego dla koneksji metrycznej. 

Ponadto, koneksja V™*^* = (V + V*)/2 jest koneksjqmetrycznq, dla ktorej zachodzi tuarunek ^r^jj = 
^ri^j + r™*^* [6]. Mozna roiuniez spraxudzic, ze (ze ujzgl^du na g) zachodzi (V*)* = V. 

Struktura dualna: Trojk^ (51, V, V*) = {S,g,V,V*) nazytuamy strukturq dualnq na S. W ogol- 
nosci, majqc metryk^ g oraz koneksje V okreslonq na S, koneksja dualna V* jest ujyznaczona uj 
sposob jednoznaczny, co jest tresciq ponizszego ttuierdzenia. 

Tujierdzenie o zujiqzku pomi^dzy koneksjami dualnymi: Niech P oraz P' sq punktami brzegoujymi 
sciezki 7, oraz niech przeksztalcenia H^^^, oraz H*^^, z Tp{S) do Tpi{S) opisujq rownolegle prze- 
suni^cie wzdiui 7, odpoujiednio ze ujzgl^du na koneksje afiniczne V oraz V*. Wtedy dla ujszystkich 
V,W eTp{S) zachodzi [6]: 

gP'{Ii^,^,V,Il*^^^,W) = gp{V,W) , yP^iPieS. (2.83) 

Warunek ten jest uogolnieniem ujarunku (2.77) istniejqcego dla koneksji metrycznej o niezmienni- 
czosci iloczynu wewn^trznego ze wzgl^du na przesuni^cie rownolegie. Wyznacza on u; sposob 
jednoznaczny zuji^zek pomi^dzy H^^^, oraz H*^^,. 

Niezmienniczosc iloczynu ujeujn^trznego dla piaskich koneksji dualnych przy przesuni^ciu rouj- 
nolegiym: Jesli H^^^, nie zalezy na S od sciezki 7, a tylko od punktouj kohcoujych^*^ P oraz P', ujtedy 



Geodezyjne koneksji Levi-Civita sq krzyujymi o najmniejszej (mierzonej przez metryk^ g) dlugosci, tzn. jej dlugosc 
pomi^dzy punktem P a P' okreslona nast^pujqco: 



p' 



dt = 



p' 



p 



jest najmniejsza, gdzie 7*(f) jest i-tq mspolrz^dnq punktu na krzymej y{t), tzn. 7'(t) :— Cili^))- 
'^Wystarczy zapisac (2.80) dla inektoroiu bazoujych {di)f^i, otrzymujqc: 

dr{d^,d,) = {V9r.d^,dj} + {d^,vtdj) , vphs^s, (2.81) 

sk^d luykorzystujqc (2.55) dla koneksji V oraz V*, otrzymujemy (2.82). 

Momimy lutedy, ze koneksja na S jest caikoiualna. Gdy przestrzen <S jest jedno-spojna, to luarunek ten oznacza znikanie 
tensora krzyujizny Riemanna na S. 
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n7pp/ = Hpp/ na S. Ponieujaz przy okreslonej metryce g, koneksja dualna V* jest jednoznacznie ujy- 
znaczona dla V, zatem roujniez dla koneksji V* jest na S speiniony ujarunek H*^^, = ITpp,, skqd z 
(2.83) przy przesuni^ciu roiunolegiym otrzymujemy: 

gp>{Upp>V, U*pp,W) =gp{V,W) , VPs i i^H e 5 . (2.84) 

Zadanie: Korzystajqc z metryki (2.68) modelu eksponentialnego oraz z (2.67) i (2.52), spraiudzic bez- 
posrednim rachunkiem uj parametryzacji kanonicznej {C)i=i ujarunek (2.82), otrzymujqc: 

^rg^j = r+;,. + r-;, = r-;, = drd.d^m) , yPs^s. (2.85) 

2.2.2 Dualne uklady vuspolrz^dnych 

Okreslenie dualnie piaskiej przestrzeni: Motuimy, ze (5, V, V*) jest dualnie ptaskq prze- 
strzeniq, jesli obie koneksje dualne, V oraz V*, sq piaskie na S. Oznacza to, ze jesli koneksja V jest 
piaska uj peujnej bazie (C*)f=i to koneksja V* jest piaska u; peujnej bazie (^* ktorq nazyujamy 
bazq dualnq do iC)i=i- 

a - koneksja dualnie piaska: 

Istotnosc poj^cia a-koneksji pojaujia si^ ujraz z rozuiazeniem na przestrzeni statystycznej S nie tyle 
prostej pary (5, V^")) = (5,c/, V^")) ale struktury potrojnej (5, V(°\ V^^")) = (5, V^") , V^"")). 
Poujodem jest istnienie poprzez metryk^ Fishera-Rao dualnosci pomi^dzy honeksjami V^"^ oraz 
V(~"), ktora okazuje si^ bye ujazna przy badaniu modeli statystycznych. 

Podsumoiuujqc, dla dowolnego modelu statystycznego S, zachodzi [6]: 

{S jest a — piaska) {S jest (—a) — piaska) . (2.86) 

Przykiad: Model statystyczny eksponentialny 5 jest piaski uj parametryzacji kanonicznej {C)i=i dla 
Q = 1. Istnieje zatem parametryzacja dualna, uj ktorej jest on roujniez a = —1 piaski. Np. uj Roz- 
dziale 2.8.1 okaze si^, ze dla modeli eksponentialnych speiniajqcych ujarunek maksymalizacji entropii, 
baz^ dualn^ do bazy kanonicznej jest baza parametrouj oczekiujanych. 
Podobnie jest dla rodziny rozkiadouj mieszanych, tzn. jest ona jednoczesnie ±1 piaska. 

Okreslenie dualnych ukiadouj ujspoirz^dnych: Zastanoujmy si^ nad ogolnq strukturq przestrzeni 
{S, g, V, V*), ktora byiaby dualnie piaska. 

Z okreslenia przestrzeni piaskiej ze ujzgl^du na okreslonq koneksja (2-59) oraz z (2.86) tuynika, ze jesli 
istnieje ukiad ujspoirz^dnych E = {C)i=i z ujektorami bazoujymi d^i = ze ujzgl^du na ktory 
koneksja V jest piaska, tzn. Vg^^d^j = 0, i,j = 1, 2, d, to istnieje roxuniez ukiad ujspoirz^dnych 
9 = (^*)f=i := {C^)f^i z ujektorami bazoujymi d^t = ze ujzgl^du na ktory koneksja V* jest 
piaska, tzn. Va^^ = 0, j, / = 1, 2, d. 

Wniosek: Zatem, gdy pole ujektorouje d^i jest V- piaskie, uji^c pole ujektorouje dgj jest V*-piaskie 
i z (2.84) wyniha stalosc gp^ {d^i , dg, ) na S. Fakt ten, biorqc pod uiuag^ ujszystkie d stopni sujobody 
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zaujarte uj afinicznym ukiadzie ujspoirz^dnych, (2.59), mozna zapisac jako^^: 

(%,9,,>EE5p^(^A, =5^^. , i,j = l,2,...,d , VPhG5, (2.88) 

gdzie iloczyn ujeujn^trzny (•, •) jest ujyznaczony w konkretnym ukiadzie ujspoirz^dnych, w tym przy- 
padku UJ H = {C)i=i- Ukiady ujspoirz^dnych E = {C)i=i oraz G = {9^)j^^ okreslone na przestrzeni 
Riemannoujskiej (5, g) i speiniajqce ujarunek (2.88) nazyujamy wzajemnie dualnymi. Warunek (2.88) 
oznacza stalosc na S iloczynu lueiun^trznego dla ukiadouj dualnie piaskich. 

W ogolnosci dla doujolnej przestrzeni Riemannoujskiej (5, g) nie istniejq ukiady ujspoirz^dnych ujza- 
jemnie dualne. 

Jesli jednak przestrzen Riemannoujska z dualnq koneksjq V, V*) jest dualnie piaska, to taka 
para ukiadotu ujspoirz^dnycti istnieje. Ale i na odujrot. Jesli na przestrzeni Riemannoujskiej {S,g) 
istniejq duja ukiady ujspoirz^dnych {C)i=i oraz {8^)j^i speiniajqce ujarunek (2.88), ujtedy koneksje 
V oraz V*, ujzgl^dem ktorych ukiady te sq afiniczne, sq okreslone, a {S, g, V, V*) jest dualnie piaska. 



Niech H = (S^')f^i b^dzie ukiadem mspolrz^dnych aflnicznych. Wtedy, zgodnie z (2.48) mspoiczynniki koneksji w 
ukiadzie mspoirz^dnych Q — {6^)f^i sq romne: 

Zaz^dajmy aby noujy uklad ujspoirz^dnych Q byl roiuniez aflniczny. Koniecznym i luystarczaj^cym marunkiem speinienia 
tego zqdaniajest zeroLuanie si§ ujszystkich drugich pochodnych ^r^gs ~ 0,gdzieZ,r,s — 1, 2, d. Warunek ten oznacza, 
ze pomi^dzy ujspoirz^dnymi oraz (6^)f^i istnieje afiniczna transformacja: 

d 

^g' ^Y.A'U" + V\ l = l,2,...,d , VPG5, 

fc=i 

gdzie A = {A\) — ((9^'/(?^*) £ GL{d) jest niezalezn^ od ujspoirz^dnych d x d - uiymiarom^ nieosoblimq macierzq 
ogolnej grupy linioujych transformacji, natomiast jest V = X^f^j^ V'^d^i jest staiym d-iuymiarouiym luektorem. 
Metryka g jest tensorem kotuariantnym rangi 2, jest to lui^c forma du)u-liniouia, zatem iloczyn uieujn^trzny luektoroui 
ukiadouj dualnych d/d£,^ oraz d/d6^ , mozna zapisac nast^puj^co: 

d 

= Y.i^'')'r9i=Ssr s,r = l,2,...,d, VP £5, (2.87) 

gdzie = (^d/d^", 9/9^'), aostatniaroiunoscLU (2.87) luynikaz zqdaniastaiosci iloczynu meujn^trznego (cJ/c'^*, d/d6^) 
na S dla ukladoiu dualnie piaskich zgodnie z (2.59) oraz z nieosobliujosci transformacji afinicznej, tak ze uklad ujspoirz^d- 
nych O ma tyle samo stopni siuobody co uklad H. Zatem otrzymalismy luarunek (2.88) dla ukladoiu dualnie piaskich. 
Przechodz^c zgodnie z (2.92) od ujspolrz^dnych kontraiuariantnych 6^ do kouiariantnych, 6r, r = 1,2, .., d, luidac, ze po- 
ujyzszy zmiqzek (2.87) dla mektoroiu bazoiuych ukladom dualnych mozna zapisac lu postaci {d/d^", d/d6r) — (JJ podanej 
uj[6]. 

Uujaga: Przestrzen ujektoroiu dualnych {d /d6^)f^i ukiadu, ktory jest afiniczny luzgl^dem koneksji V* jest izomorflczna z 
przestrzeniq 1-form {dd^)f.^i sprz^zonq liniouio do ukiadu przestrzeni ujektorom {d/d9'~)f^i. Dla 1-form sprz^zonych do 
luektoroiu bazoujych z definicji zachodzi d6^ {d/d6") = 51, s,r = 1, 2, d. [1-form d9^, r = 1,2, d, nie nalezy mylic 
z przyrostami typu (2.50) czy jak in (2.49)]. 
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Euklidesoujy ukiad ujspoirz^dnych: W przypadku Euklidesotuego ukiadu tuspoirz^dnych na 5 
mamy (z definicji): 

(%,5g.>=di, , i,j = l,2,...,d , yPseS, (2.89) 
CO oznacza, ze jest on samo-dualny. 

Uujaga o ujspoiczesnym zastosoujaniu koneksji dualnych: Interesujqcym ujydaje si^ fakt, ze po- 
j^cie koneksji dualnych ma coraz uji^ksze zastosoiuanie uj analizie ukiadouj linioujych [22] i szeregouj 
czasotuych [6]. Przykiadem moze bye jej zastosoiuanie w analizie szeregouj czasoujych ARMA(p,q) [23], 
CO jest zujiqzane z faktem, ze zbior ujszystkich szeregou; czasoujych ARMA(p,q) ma skoiiczon^ para- 
metryzacj^ i uj zuiiqzku z tym tujorzy on skohczenie ujymiaroujq rozmaitosc. Aby dokonac analizy 
poroujnaujczej dujoch szeregou; czasoujych biorqc pod uujag^ problemy ich aproksymacji, estymacji 
oraz redukcji ujymiaru, anaUzoujanie pojedynczego szeregu czasoujego jest nieujystarczajqce i okazuje 
si^ koniecznym rozuiazanie ujiasnosci caiej przestrzeni tych szeregouj ujraz z ich strukturq geome- 
trycznq [6]. 



2.2.2.1 Transformacja Legendre'a pomi^dzy parametryzacjami dualnymi 



Niech H = {C)i=i oraz = {6^)f^^ sq ujzajemnie dualnymi bazami na S, zgodnie z relacjq (2.88). 
Zdefiniujmy ujspoirz^dne metryki g ze ujzgl^du nauklad ujspolrz^dnych {C)i=i jako: 

4:=(%,9^,>, i,j = l,2,...,d , VPhG5, (2.90) 

a ze ujzgl^du na ukiad luspoirz^dnych {9^)j^i jako: 

gf.:={dg^,ds,) , i,j = l,2,...,d , VPeG5. (2.91) 

Przejscie od ujspoirz^dnych kontraiuariantnych {9^)j^i w bazie dgj = d/dO^ do koujariantnych 
(^i)j=i u' bazie d^^ = d/dOj ma postac: 

d d 
h ■■= E 9% 0" oraz d'^ := J] 5,. , j,k = 1,2, ...,d , V Pq G 5 , (2.92) 

k=l k=l 



ukiad luspoirz^dnych {Oj)'^^^, ujspoirz^dne metryki g^^ sq roiune: 



gdzie gl jest {j, /c)-skiadoujq macierzy odxurotnej do macierzy informacyjnej {gjf.)- Ze ujzgl^du na 

= (d'\d'^) , i,j = l,2,...,d , yPe^S. (2.93) 
Podobnie okreslamy macierz informacyjnq ((7^'^) jako odturotnq do (gj^). 

Rozujazmy transformacje ukiadu ujspoirz^dnych: 

-' 1 = 1 J ^ 4=1 



oraz 



d J^d0i d 



% = 9fI = E5i5^ = E(%^.)^'^=E(%^^)^^- z = l,2,...,d, VPG5.(2.95) 

i=i ^ ^ i=i 3=1 
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Zatem po skorzystaniu z (2.94)-(2.95) oraz luarunku (2.88), mozna dualne metryki (2.90) oraz (2.93) 
zapisac nast^pujqco: 

3ij=d^ ^^' = 5^' ^'■?' = l'2,...,^i , VPG5, (2.96) 

CO oznacza roujniez, ze macierze informacyjne, = {dij) w bazie E = {C)i=i oraz I_f(9) = (gl^) 

w bazie^*' dualnej = {9i)f^i, ujzgl^dem siebie odujrotne: 

If{E) = I^\@), VPGcS. (2.97) 



Rozxuazmy z kolei funkcj^ : S ^ R. oraz nast^pujqce czqstkoLue rotunanie rozniczkotue: 

d 

d^,'^ = 9i, i = l,2,...,d tzn. dij = ^eidC, VPhG5. (2.98) 

i=l 

Ze ujzgl^du na (2.96) roujnanie (2.98) daje: 

%%V = 4, hj = h2,...,d , VPse5. (2.99) 

Ze ujzgl^du na dodatniq okreslonosc metryki g^j, rorunanie to oznacza, ze druga pochodna 4^ tiuorzy 
roiuniez dodatnio okreslonq macierz. Zatem i/" jest scisle W})puktq funkcjq ujspoirz^dnych , , . . • , C^, 
dia kazdego P e S. 

Podobnie, rozujazajqc funkcj^ (/> : 5 — )■ M oraz czqstkotue roujnanie rozniczkouje: 

d 

d^^4> = ^\ i = i,2,...,d tzn. d(p = J2Cdei, yPees. (2.100) 

1=1 

Ze ujzgl^du na (2.96) rotunanie (2.100) daje: 

d'^d'^(l) = gi\ i,j = l,2,...,d, yPe€S, (2.101) 

uj zujiqzku z czym dodatnia okreslonosc dualnej metryki g^^ oznacza, ze druga pochodna c/) tiuorzy 
dodatnio okreslonq macierz. Zatem (f) jest scisle wypuhlq funkcjq luspoirz^dnych 6^,0^, ...,0'^, dIa 
kazdego P G 5. 



Transformacja Legendre'a: Poujiedzmy, ze V jest peujnym rozujiqzaniem rotunania (2.99). Wtedy 
po skorzystaniu z (2.96) oraz (2.98), ujidac, ze od -0 = ^(S) do 4> = (/){&) mozna przejsc przez trans- 
formaci§ Legendre'a^^ : 

d 

= Yl ^'^i - ^(^) ' V P G cS . (2.103) 

i=l 

zaleznosci od kontekstu i aby nie komplikoiuac zapisu, przez 6 b^dziemy rozumieli parametr inektoroujy ire inspol- 
rz^dnych komariantnych {6i)f^i b^dz kontraiuariantnych {d^)f^i. Analogicznie post^pimy dla H. 
'^Spramdzmy zgodnosc (2.103) z marunkami (2.98) oraz (2.100). Z (2.103) otrzymujemy: 

d d 

d(l> = ^Vde, + ^dCe^- dii} , 'iPes. (2.102) 

i=l i=l 

Korzystaj^c z (2.98) otrzymujemy = d^di jak lu (2.100). 
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Podobnie, poiuiedzmy, ze </> jest peujnym roziuiqzaniem roujnania (2.101). Wtedy poprzez transforma- 
cj^ Legendre'a: 

d 

^{E) = Y,e0i-HQ) , (2.104) 

1=1 

mozna przejsc od funkcji (/> do i/^. 

Uiuaga: W ogolnosci transformacje pomi^dzy ukiadami ujspoirz^dnych H = {C)i=i oraz = 
{dj)j^i, ktore majq postac (2.103) i (2.103) nazyujamy transformacjami Legendre'a^^. 

Okreslenie potencjaioir: Funkcje ip oraz speiniajqce odpoujiednio tuarunki (2.98) oraz (2.100), po- 
mi^dzy ktorymi mozna przejsc transformacjq Legendre'a (2.103) lub (2.104), nazyujamy potencjalami 
ukiadouj ujspoirz^dnych (odpoujiednio E oraz 0). 

Ponizej podamy ttuierdzenie podsumoujujqce poujyzsze rozmazania. 

Tujierdzenie o dualnych ukladach wspotrz^dnych: Niech H = {^^)f^i jest V-afinicznym ukiadem 
ujspolrz^dnych na dualnie piaskiej przestrzeni (5, g, V, V*). Wtedy, ze ujzgl^du na metryk^ g, istnieje 
dualny do {C)i=i ukiad ujspoirz^dnych = {0i)f^^, ktory jest V*-afinicznym ukiadem ujspoirz^d- 
nych. Oba te ukiady ujspolrz^dnych sq zujiqzane transformacjq Legendre'a zadanq przy potencjaiach 
il^{E) oraz 0(0) poprzez zuiiqzki (2.103) lub (2.104). Ponadto ujspoirz^dne metryki uj tych ukladach 
ujspoirz^dnych sq zadane jako drugie pochodne potencjaiouj, jak uj (2.99) oraz (2.101). 



Wspoiczynniki koneksji dla ukladouj dualnych: Na koniec podajmy ujyprotuadzone z uzyciem 
zujiqzku (2.82) oraz (2.99) postacie ujspoiczynnikouj koneksji afinicznej F^^*^ [6] (por. (2.55)): 

4V= %) =%%%^(") ' ^,J,^ = l,2,...,d, VP=g5 (2.107) 
oraz z uzyciem (2.82) oraz (2.101), ujspoiczynniki koneksji afinicznej T^J''': 

' := {VQO^d'^, d% = d'^d'W'^<p{e) , i,j,l = l,2,...,d, VPe e 5 , (2.108) 
przy czym, ponieiuaz ukiady ujspoirz^dnych {C)i=i oraz {Oi)f^i sq afiniczne, zatem: 

4,« = rr''' = o> i,j,i = 1,2,..., d, ypes. (2.109) 



'^Jesli ip oraz 4> sq ujypukiymi funkcjami na luypuklych przeslrzeniach parametrouj Vh oraz Ve, gdzie parametry luek- 
toroiue majq postac H = oraz G = {6i)f^i, to transformacje Legendre'a mozna sformuioiuac lu sposob bardziej 

ogolny [6]: 

(/.(e) = maa;(H6VH) , VP G <S (2.105) 

dla ) b^dqcego roziuiqzaniem romnania (2.99). Podobnie, poiuiedzmy, ze 4>{Q) jest peiunym rozuji^zaiem roumania 
(2.101). Wtedy poprzez transformacje Legendre'a: 



ij{E) = max(eeve) <{ I] - 0(e) \ , V P G 5 , (2.106) 
otrzymujemy potencjal V'(^ 
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2.2.3 Geometryczne sformuloujanie teorii estymacji dla EFI 

Dokiadne sformuioujanie metody ekstremalnej fizycznej informacji (EFI) jest tresciq kolejnych 
rozdziaiouj skryptu. Ponizej podajemy jedynie jej ujst^pnq charakterystyk^ z punktu ujidzenia geo- 
metrii rozniczkoiuej na S. 

Teoria estymacji lu metodzie EFI moze bye okreslona geometryeznie uj sposob nast^pujqey. Za- 
iozmy, ze z peujnyeh potuodou; teoretyezny rozkiad PnaB lezy na peiunej podprzestrzeni {warstwie) 
•Sw ^ 5. Warstiua oraz ujymiar B nie sq z gory okreslone. Zakiadamy roujniez, ze ujszystkie roz- 
luazane rozkiady, iqcznie z empirycznym, lezq w przestrzeni statystycznej S, ktora {w przeciiuienstiuie 
do estymacji uj statystyce klasycznej [6, 21]) nie ma znanej postaci metryki Fishera-Rao. Na podsta- 
tuie danych, ktore daiy rozkiad empiryczny Pobs< szukamy punktu nalezqcego do 5^, ktory speinia 
zasady informacyjne i jest szukanym oszacowaniem rozkiadu teoretycznego P. 

Uujaga o estymacji uj statystyce klasycznej: W statystyce klasycznej luyznaczamy krzyujq geode- 
zyjnq biegnqcq przez punkt empiryczny Pobs i szukane oszacoujanie P& stanu ukiadu lezqcego na 
Sw Ponieujaz za ujyj^tkiem przypadku a = okazuje si^, ze a-koneksja nie jest metryczna (tzn. nie 
jest ujyproujadzona jedynie z metryki, uj naszym przypadku metryki Fishera-Rao), zatem odlegiosc 
Pobs od P^ nie jest na ogoi najmniejsza z mozliujych [6]. Geodezyjna ta przecina Sw uj peujnym 
punkcie nalezqcym do S, ktory jest szukanym oszacowaniem P^ stanu ukiadu. Jak ujspomnielismy, 
UJ statystyce klasycznej istnieje jedno uiatujiajqce estymacji zaiozenie. Otoz znana jest ogolna postac 
modelu statystycznego S, zatem znana jest i metryka Fishera-Rao na S. 

Uujaga o estymacji uj EFI: W przeciujiehstujie do tego estymacja uj metodzie EFI nie moze zaio- 
zyc z gory znajomosci postaci metryki g Fishera-Rao. Metoda EFI musi ujyestymoujac g i estymacja 
tajest dynamiczna, poprzez konstrukcj^ odpoujiednich zasad informacyjnych. 
Zasada ujariacyjna: Jedna z tych zasad poujinna zapeujnic, ze po ujyestymoujaniu metryki Fishera- 
Rao, znalezione oszacoujanie metody EFI b^dzie roujniez lezec na geodezyjnej iqczqcej je z Pobs- 
Stqd pojaujia si^ koniecznosc tuproujadzenia wariacyjnej zasady informacyjnej. 
Zasada strukturalna: Druga tzuj. strukturalna zasada informacyjna zapeujni, ze szukane oszaco- 
ujanie b^dzie lezec uj klasie rozujiqzah analitycznych w parametrze H , uj znaczeniu roujnoujaznosci 
metrycznej otrzymanego modelu z modelem analitycznym. 

Zatem zasada ujariacyjna i strukturalna ujyznaczajq samospojnie punkt P^ i tym samym ujskazujq 
podprzestrzeh statystycznq . Jednak koneksja aflniczna, dla ktorej ukiad ujspoirz^dnych ujzdiuz 
krzyujej geodezynej iqczqcej Ppbs z P^ jest piaski, nie jest a-koneksjq Amariego. 
Sformuioujaniem i zastosoujaniem zasad informacyjnych uj estymacji metodq EFI zajmiemy si^ uj 
kolejnych rozdziaiach. 

2.2.4 Umaga o rozujini^ciu rozkiadu uj szereg Taylora 

W caiej tresci skryptu zakiadamy, ze rozkiad praujdopodobiehstuja (lub jego logarytm 

InP(H)), jest ujystarczajqco giadki, tzn. posiada rozwini§cie w szereg Taylora ujystarczajqco ujy- 
sokiego rz^du, uj kazdym punkcie (pod)przestrzeni statystycznej S [10]. Zatem albo jest speiniony 
ujarunek analitycznosci rozkiadu uje ujszystkich skiadoujych estymotuanego parametru E, albo przy- 
najmniej rozkiad praujdopodobiehstuja okreslony uj otoczeniu punktu P G 5 posiada diet Jp{S, R) 
ujystarczajqco ujysokiego, choc skohczonego rz^du r, np. ujyrazy do drugiego (lub innego okreslo- 
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nego, ujyzszego) rz^du roztuini^cia lu szeregu Taylora, podczas gdy ujyzsze niz r rz^dy roztuini^cia 
znikajq [24]. Do rozmazari na temat rz^du dzetom poujrocimy uj Rozdziale (4.2). 



Przestrzen luektoroiua dzetoiu: Istotnq spraiuq jest fakt, ze zbior ujszystkich r-dzetoiu funkcji w punk- 
cie P € S tiuorzy skonczenie ujymiaroujq przestrzen ruektoroiuq, natomiast ich suma J^{S,R) = 
Upe5 Jpi'S,^) jest wiqzkq wektorowq, czyli wiqzkq wtohnistq^'^ , ktorej wlokno jest przestrzeniq 
wektorowq nad przestrzeniq bazowq S. 

Mozna pokazac, ze roujniez {S, R) jest przestrzeniq luektoroujq. Zatem dzety nalezqce do (5, R) 
mozna dodaiuac i mnozyc przez liczb^. Tujorzq one tez algebr^ co oznacza, ze mozna je mnozyc. Waz- 
nosc przestrzeni J]? (5, R) ujarunia si^ przy okresleniu roztuini^cia funkcji uj szereg Taylora. 
Klasy roujnoujaznosci dzetotu: O funkcjach moujimy, ze sq w tej samej klasie roujnoujaznosci dze- 
touj, gdy majq takie samo rozujini^cie Taylora. 

Poj^cie odujzoroujania Taylora na S: Niech Tp jest przestrzeniq ujektoroujq dualnq do przestrzeni 
stycznej Tp na przestrzeni statystycznej S, oraz niech S'^{Tp) jest przestrzeniq ujektorotuq ujszystkich 
symetrycznych^° wieloliniowych odwzorowan: 



'^Okreslenie ujiqzki iDtoknistej: (Rozniczkoiualna) luiqzka mloknista [E, -k,M,F, G) nad A4 skiada si§ z nast^pujqcych 
siedmiu elementom [25]: 

1. Rozniczkomalnej rozmaitosci E nazymanej przestrzeniq totalnq. 

2. Rozniczkomalnej rozmaitosci A4 nazymanej przestrzeniq bazowq. 

3. Rozniczkomalnej rozmaitosci F nazymanej (typowym) wtoknem. 

4. Odmzoromania suriektymnego tv : E ^ Ai nazymanego rzutowaniem, ktorego odmrotny obraz Tv^^{p) = Fp = F 
nazymamy mloknem m p gdzie p £ A4. 

5. Grupy Liego G nazymanej grupq struhturalnq, ktora dziala lemostronnie na F. 

6. Zbioru otmartych pokryc {Ui} rozmaitosci M z dyfeomorfizmem (f>i : Ui x F ^ -K~^{Ui) takim, ze tt o (j>i{p, f) = p, 
gdzie f € F. Poniemaz 4>^^ odmzoromuje -K~^{Ui) na iloczyn prosty Ui x F diatego odmzoromanie jest nazymane 
lohalnq trywializaqq . 

7. Wpromadzmy oznaczenie 4'i,pif) = 4'i{Pj /)• Odmzoromanie (t)i^p : F ^ Fp jest dyfeomorfizmem. Rz^damy aby na 
Ui f]Uj ^ odmzoromanie tij = cj)~^ o (^j^ : F ^ F bylo elementem grupy G. Wtedy (fn oraz <;/>_, sq zmi^zane poprzez 
gladkie odmzoromanie tij : Ui{^Uj — !> G m nast^pujqcy sposob: ^^(p, /) = 4>i{p, Uj{p)f)- 

Odmzoromania tij sq nazmane/unfecjami przejscia. 

Oznaczenie: Czasami na oznaczenie mi^zki mloknistej {E, tTjM, F, G) uzyma si§ skroconego zapisu E ^ M lub namet 
tyiko E. 

Przyklad: W pomyzszych rozmazaniach przestrzeniq bazomq A4 jest przestrzen statystyczna <S. Gdy Tp jest prze- 
strzeniq stycznq do <S m P a Tp jest przestrzeniq mektoromq dualnq do Tp, mtedy typome miokno Fp moze bye np. 
przestrzeniq tensoromq: 



gdzie q jest indeksem stopnia kontramariantnego iloczynu tensoromego Tp a r indeksem stopnia komariantnego iloczynu 
tensoromego Tp. Informacja Fishera jest szczegolnym przykiadem tensora [Tp]^ na S. Gdy typome miokno F jest prze- 
strzeniq tensoromq a przestrzen mektoroma Tp jest d - mymiaroma, to grupa strukturalna G jest m ogolnosci ogolnq grupq 
liniomych transformacji GL{d). 
^"Odmzoromanie nazymamy symetrycznym jesli jest symetryczne ze mzgl^du na permutacj^ zmiennych. 




(2.111) 



razy 



[Tp]! = Tp (g) • • ■ ® Tp (g) Tp ® ■ ■ • (g) Tp , 



(2.110) 



q—razy r—razy 



50 



Rozwini^cie w szereg Taylora T peujnej funkcji (np. P{r) lub InP(H)) na S okresla ujtedy odtuzo- 
roujanie: 

T : J^(5,R) ^ 5(r^) gdzie S{T*p) = ^ S^{T*p) , (2.112) 

fc>0 

nazyujane odwzorowaniem Taylora. Szeregi Taylora spelniajq istotnq rol^ uj analizie statystycznej 
[24], o czym przekonamy si^ przy ujyproujadzeniu podstaujovuego narz^dzia estymacji metody EFI, a 
mianoiuicie strukturalnej zasady informacyjnej (por. Rozdziai 3.1.1). 
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2.3 Tujierdzenie Rao-Cramera i DORC 



Estymatory MNW majq asymptotycznie optymalne miasnosci, tzn. nieobciqzone, zgodne, efek- 
tyiune i dostateczne [11]. Ponizszy rozdziai posiui^cimy efektyujnosci nieobciqzonych estymatoroiu 
parametru dla doujolnej luielkosci proby N. 

Estymator efektyujny: Wartosc dolnego ograniczenia na ujariancj^ estymatora, czyli tuariancj^ es- 
tymatora efektyujnego, podaje ponizsze tiuierdzenie Rao-Cramera. Jego sednem jest stujierdzenie, ze 
osiqgni^cie przez estymator dolnej granicy ujariancji podanej w ttuierdzeniu oznacza, ze w klasie esty- 
matorotu nieobciqzonych, ktore speiniajq tuarunek regularnosci (tzn. majq funkcj^ rozkiadu praiudo- 
podobienstuja nie posiadajqcq punktoiu nieciqgiosci zaleznych od estymoruanego parametru 0), nie 
znajdziemy estymatora z mniejszq ruariancjq. 

Estymator efektywny ma wi^c najmniejszq z mozliwych wariancji, jakq mozemy uzyskac w pro- 
cesie estymacji parametru. 



2.3.1 Skalarne Tujierdzenie Rao-Cramera 

Tujierdzenie Rao-Cramera (TRC). Przypadek skalarny: Niech F{Y) b^dzie nieobciqzonym es- 
tymatorem funkcji skalarnego parametru g (0), tzn.: 

EeF(Y)=g{e) (2.113) 



oraz niech /f(^) b^dzie informacjq Fishera dla parametru 9 ujyznaczonq na podstaujie proby Y. 
Zakiadajqc ujarunki regularnosci, otrzymujemy: 

CO jest tezq tujierdzenia Rao-Cramera. W szczegolnym przypadku, gdy g{9) = 6, ujtedy z (2.114) 
otrzymujemy nast^pujqcq postac nieroujnosci Rao-Cramera: 

Wielkosc: 

m! u,b ^ dla (2.116) 

nazyujana jest dolnym ograniczeniem Rao-Cramera (DORC)^^ . Przypomnijmy, ze ponietuaz statystyka 
F{Y) jest estymatorem parametru 9, uji^c ujartosci jakie przyjmuje nie zalez^ od tego parametru. 



Uujaga: W przypadku, gdy rozkiad zmiennej Y traktotuany jako funkcja estymotuanego parametru 6 
ma dla peujnych ujartosci tego parametru punkty nieciqgiosci, ujtedy ujariancja estymatora parame- 
tru 9 ujyst^pujqca po leujej stronie (2.115) moze okazac si^ mniejsza niz ujartosc po stronie praujej. 
Sytuacji nieciqgiosci rozkiadu uj parametrze nie b^dziemy jednak rozujazali. Przeciujnie, zakladamy, 
ze rozkiad P{Q), i jej logarytm In -P(9), jest wystarczajqco gladki, tzn. posiada rozwini^cie w sze- 
reg Taylora ujystarczajqco luysokiego rz^du, u; kazdym punkcie (pod)przestrzeni statystycznej S, jak 
o tym ujspomnielismy u; Rozdziale 2.2.4. 

^'W j^z. angielskim Cramer-Rao lower bound (CRLB). 
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2.3.1.1 Doujod TRC (ujersja doujodu dla przypadku skalarnego) 

Wspolczynnik korelacji liniowej Pearsona dla dmoch zmiennych losotuych S{Y) i F{Y) zdefi- 
nioiuany jest nast^pujqco: 

(c J7\ cove {S, F) 
pg {S,F) = ^ = . (2.117) 

Z klasycznej analizy statystycznej ujiemy, ze pe {S, F) G [—1, 1], stqd z (2.117) otrzymujemy: 

CTe(^)> 277;^ • (2.118) 

Roujnosc ujyst^puje jezeli xuspoiczynnik korelacji linioujej Pearsona jest rotuny 1, co zachodzi, gdy 
zmienne S i F idealnie skoreloruane. 

Niech teraz zmienna losoiua S b^dzie statystyk^ ujynikoujq S{9) = S{Y\d). 
Pokazmy, ze: 

g\e) = covgiSie),F) . (2.119) 
Istotnie, ponieruaz Eq {S{9)) = 0, (2.25), zatem: 

cove (5(0), = Ee [S{9)F{Y)) = J^dy P{y\e)S{9)F{y) = l^dyP{y\e)^^F{y) 

= l^dy^P{y\e)F{y) = ^ Jjy P(y\e)F{y) = ^EeF{Y) = g' (9) . (2.120) 

Skoro tui^c zgodnie z (2.28) zachodzi, a'^S{9) = If{9), xni^c tustaujiajqc (2.120) do (2.1 18) otrzymujemy 
(2.114), CO kohczy doujod TRC. 

2.3.1.2 Przykiad skalarny DORC dla rozkiadu normalnego 

Interesuje nas przypadek estymacji skalarnego parametru 9 = p w probie prostej Y, przy 
czym zakiadamy, ze g{p) = p. Rozujazmy sredniq arytmetycznq Y = ^^^^ Y^ (z realizacjq 
y = jf J2n=i y™)' ktora, zakiadajqc jedynie identyczne rozkiady zmiennych Yi proby, jest dla doujol- 
nego rozkiadu p(y) zmiennej Y, nieobciqzonym estymatorem iuartosci oczekimanej p = E^{Y) = 
fy dypiy) y, tzn.: 

E^ (y) = / dyyP{y\p) = E^{Y) = p . (2.121) 
Jb 

Ponadto dla proby prostej, z bezposredniego rachunku otrzymujemy: 

al (y) = j^dyP{y\p) (y - E{Y)f = ^ , (2.122) 
gdzie cr^ jest luariancjq cr^(y) zmiennej Y. 

Niech teraz zmienna pierujotna Y ma rozkiad normalny N{p,a'^). Ze zujiqzkou; (1.17) oraz (1.18)- 
(1.19) ujiemy, ze srednia y jest estymatorem MNW parametru p = E{Y), zatem przyjmijmy F (y^ = 
p = Y.Z (2.122) tuidzimy lui^c, ze dla zmiennych o rozkiadzie normalnym zachodzi: 

^l{F) = al{Y) = ^ . (2.123) 
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W przypadku rozkladu normalnego xuarunek (2.115) iattuo spramdzic bezposrednim rachunkiem. 
Istotnie, korzystajqc z (2.9) oraz (2.17), otrzymujemy (por. (2.17)): 

{,) = (5 - /^)) = (^)' ^ = 5 = ^H/^) . (2.124) 
Z (2.123) oraz (2.124) otrzymujemy: 

= ^ . (2.125) 

CO stanorui DORC (2.116) dla nierotunosci Rao-Cramera (2.115). Warunek ten otrzymalismy juz po- 
przednio dla rozkladu normalnego (por. (2.18)). Speinienie go oznacza, ze srednia arytmetyczna y jest 
efektyujnym^^ estymatorem ujartosci oczekiujanej zmiennej losoiuej opisanej rozkiadem normalnym 

iV(^,a2). 

Utuaga o rozkiadach eksponentialnych: Rozkiad normalny jest szczegolnym przypadkiem szerszej 
klasy rozkladouj, ktore speiniajq ujarunek DORC. Rozkiady te sq tzuj. rozkiadami eksponentialnymi 
(2.61) ujproujadzonymi uj Rozdziale 2.2. Poujyzej, uj przypadku rozkladu normalnego, spraujdzilismy 
ten fakt bezposrednim rachunkiem zakladajqc ujpieru; typ rozkladu zmiennej Y, a potem spratudza- 
jqc, ze estymator fi parametru ^ = E^{Y) osiqga DORC. 



2.3.2 Wieloparametrovue Tujierdzenie Rao-Cramera 

Gdy dokonujemy roiunoczesnej estymacji d> \ parametrouj, ujtedy funkcja luynikouja 5(0) jest 
d-ujymiaroujym ujektorem kolumnoujym (1.9), natomiast obsertuoxuana IF uj punkcie B, czyli iF(6), 
oraz ujartosc oczekituana z iF(0), czyli Ip (por.(2.14)), sqd x d ujymiaroujymi macierzami. 

Analogia inflacji ujariancji: Ponizej pokazemy, ze ujiqczenie do analizy dodatkoujych parametrouj 
ma (na ogol) ujplyuj na ujartosc IF dla interesujqcego nas, ujyroznionego parametru. Sytuacja ta jest 
analogiczna do problemu inflacji ujariancji estymatora parametru uj analizie cz^stotlituoscioiuej [14]. 
Ponizej przedstaujiona zostanie odnoszqca si^ do tego problemu ujieloparametrouja luersja tujierdze- 
nia o dolnym ograniczeniu uj nieroujnosci Rao-Cramera (DORC). 

Uujaga o ujersjach TRC: Ponizej podamy dujie roujnoujazne ujersje [6] ujieloparametroujego Tujier- 
dzenia Rao-Cramera (TRC). Pierujsza z nich okaze si^ bye bardzo uzyteczna przy ujproujadzeniu uj 
Rozdziale 2.7 relacji pomi^dzy tzuj. informacjq Stam'a a pojemnosciq informacyjnq ukiadu. W Roz- 
dziale 2.8.1 przekonamy si^, ze xuersja druga TRC jest uzyteczna uj spraujdzeniu czy ujieloparame- 
trouja estymacja przebiega na DORC. 



Tzn. posrod estymatoroiu nieobci^zonych parametru n — Efj,{Y) i regularnych, posiada najmniejsz^ z mozliujych 
mariancji. 
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2.3.2.1 Pierujsza luersja ujieloparametroiuego TRC 

Wieloparametroiue Tujierdzenie RC (luersja pierujsza): Niech F{Y) b^dzie funkcjq skalarnq z 
ujartosciq oczekiujanq: 

SqF (y) = 5 (9) G R (2.126) 



oraz /f(0) niech b^dzie oczekiiuanq informacjq Fishera (2.14) dla = {Oi)f^i ujyznaczonq na prze- 
strzeni proby B. Zachodzi xutedy nieroxunosc: 

> a^/^i (9) a , (2.127) 

gdzie Ip^ jest macierz^ odmrotn^ do macierzy informacyjnej Fishera Ip, natomiast 

dgiQ) 



jest d-ujymiaroujym ujektorem. 



(2.128) 



Uujaga: Warunek (2.126) oznacza, ze skalarna funkcja F(Y) jest nieobciqzonym estymatorem ska- 
larnej funkcji g (0) luektoroujego parametru 6. 

2.3.2.2 PrzykJ-ad ujektoroiuego DORC 

Jako ilustracj^ potuyzszego luieloparametroiuego Tiuierdzenia RC przedstaiuimy przykiad, przyj- 
mujqc szczegoln^ postac skalarnej funkcji g{Q), o ktorej zakiadamy, ze jest liniomq funkcjq skiado- 
ujych 6i ujektora parametrouj [13]: 

d 

5(e) = a^G = J^a^e, , (2.129) 

i=l 

gdzie a jest peujnym znanym mektorem o staiych skiadoujych Oj, ktore nie zalez^ od skiadoujych 
luektora 0. Zaiozmy chtuiloujo, ze a^ = (1,0, .. . ,0), tzn. jedynie ai / 0. Wtedy z (2.129) otrzy- 
mujemy g {&) = 6i, natomiast (2.127) uj Tiuierdzeniu RC, a% (F) > sJ^Ip^ (0)a, przyjmuje dla 
rozujazanego nieobciqzonego estymatora F parametru 9i, tzn. Eq{F{Y)) = 6i, postac: 

4(^)> [^f'(0)]ii=:4'(0) , (2.130) 

gdzie oznacza element (1,1) macierzy Ip-^ (0). Prauja strona nieroujnosci (2.130) podaje dolne 

ograniczenie tuariancji estymatora F, pod tuarunkiem, ze 6i jest ujyroznionym parametrem a mar- 
tosci pozostaiych parametrotu nie sq znane. Oznaczmy ujeujn^trznq struktur^ d x d -ujymiaroujych 
macierzy 1^(0) oraz If{Q)~^ nast^pujqco: 

ipie)=( i^'' [^'^ \ (2.131) 



If21 If: 



22 



oraz 



gdzie Ipii oraz l]^ = \lp^ (®)]ii (zgodnie z oznaczeniem ujproiuadzonym uj (2.130)) sq Hczbami, 
-^F22, I'f' sq (d - 1) X {d - l)-ujymiaroujymi macierzami, natomiast (/Fi2)ix{d-i). {I F2i) {d-i)xi^ 
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Ix (d-1), {lf)(d-i)xi odpoujiednimi luierszoujymi bcjdz kolumnoiuymi luektorami o ujymia- 
rze {d — 1). 

Rozujazmy parametr di. Jego informacja Fishera (patrz ponizej Uiuaga o naziuie) jest roujna Ipu = 
Ipii (^i)- Nie oznacza to jednah, ze {F) oraz Ipu z sobq automatycznie potui^zane nierouj- 
nosciq (Tq (F) > l/IiT'ii, ktorajest tresciq Tujierdzenia RC (2.115). Udoiuodnilismy botuiem tylko 
dia przypadku parametru skalarnego, tzn. gdy tylko jeden parametr jest estymoiuany, a reszta para- 
metrouj jest znana. 

Okreslmy relacj^ pomi^dzy (Ipu)^^ oraz ij}. Oczyujiscie zachodzi: 

,,(e).,-(e).(j-J-)(||).(jj), ,.,33) 

gdzie 1 jest {d — 1) x {d — l)-ujymiaroujq macierz^ jednostkoujq. 
Z poujyzszego mamy: 

(-^Fll)lxl (Ip )lxl + (-^F12)lx{d-1) -l)xl — J- 

^ {Ijr'y' = Ifu + iFulf (/F)"' , (2.134) 

(^F2l)(d-l)xl (-^F )lxl + (.lF22){d-l)x{d-l) (-^F )(d-l)xl = (0)(d_l)xl 

If = - (/f22)"' If2iI¥ (2.135) 

skqd otrzymujemy: 

{I^f) ^ = -^Fll - -^F12 (-^F22)~^ -^F21 • (2.136) 

Ponietuaz If22 jest macierzq informacyjnq (dla parametrotu 92,03, •••)^d). jest wi^c ona zgodnie z 
roziuazaniami przedstaruionymi ponizej (2.32), symetryczna i nieujemnie okreslona. Symetryczna i 
nieujemnie okreslona jest zatem {If22)~^- Ponieujaz z symetrii macierzy Ip ujynika Ipi2 = {Ip2i)^, 
zatem ostatecznie forma kruadratotua Ifi2 {If22)~^ If21 > 0, stqd z (2.136) otrzymujemy: 

(/^^^r^ < Ml I^''>j^, (2.137) 

-'Fll 

CO zgodnie z (2.130) oznacza, ze: 

4(^)>4'>y^- (2.138) 

Wniosek: Zatem ujidzimy, ze /^^ daje silniejsze ograniczenie niz [Ipu)^^. Tzn. uj przypadku esty- 
macji tuieloparametrotuej nalezy zastosoujac zujiqzek cj^ (F) > ij^, (2.130), gdyz to ujiasnie on jest 
tuiasciujy na podstaujie ujieloparametroujego Tujierdzenia RC. Zastosotuanie cj|, (F) > l/Ipu, tak 
jak bysmy mieli do czynienia z przypadkiem skalarnym, moze bi^dnie zanizyc tuartosc dolnego ogra- 
niczenia na ctq (F). 

Uujaga o nazujie Ipu: W "statycznie" ukierunkoujanej analizie statystycznej ujielkosc {l};}^)'^ jest 
interpretoujana jako informacja Fishera dla 6i - jednak w tresci skryptu odstqpimy od tej nazujy. 
Okazuje si^, ze u; analizie ukierunkoujanej na estymacj^ "dynamicznq", tzn. generuj^cq roxunania roz- 
niczkouje dla rozkiadouj, bardziej uzyteczne jest nazujac ij^ po prostu doln}^m ograniczeniem RC na 
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wariancj^ estymatora parametru 6i w sytuacji gdy pozostaie parametry nieznane (tzn. trzeba je 
estymoujac z proby roujnoczesnie z ^i). Natomiast Ipu b^dziemy nazywali, zgodnie z tym jak to 
uczynilismy, informacjq Fishera parametru 6i i to niezaleznie od tego czy inne parametry rouj- 
noczesnie estymotuane, czy tez nie. 

Podsumoujanie na temat zanizenia DORC: Nalezy pami^tac, ze estymujqc parametr 9i nalezy bye 
sujiadomym faktu luyst^poruania rorunoczesnej estymacji innych parametroru, gdyz lustaruienie ujar- 
tosci Ipii do nieroujnosci RC moze lu przypadku estymacji inieloparametroiuej doproujadzic do za- 
nizenia ujartosci dolnego ograniczenia ujariancji tego parametru. 

Przypadek "pseudo-skalarny": Istnieje jednak petuien ujyjqtek spoujodotuany dokiadnym zerouja- 
niem si^ Ifi2 dla doujolnego N. Wtedy z (2.136) ujynika, ze ujzrost ujariancji estymatora parametru 
zujiqzany z dodaniem noujych parametrouj o nieznanych ujartosciach byiby roujny zeru. Tak tez byio 
UJ rozujazanym ujczesniej przykiadzie rozkiadu normalnego A'' (/x, a) (poroujnaj (2.24) z (2.17)). 
Podobnie, taki szczegolny przypadek zachodzi, gdy ujieloparametroujym rozkiadem praujdopodo- 
bieristuja jest ujiarygodnosc A^-ujymiaroujej proby P{9i,92, , ■■■,0n) = Yln=iPSn' gdzie kazdy esty- 
moujany parametr 0„ okreslatylkojeden punktoujy rozkiadp^^. Wtedy macierz informacyjna Fishera 
If jest diagonalna i zachodzi Ipmi = {Ip"')^^, a uj miejsce (2.138) otrzymujemy dla kazdego parame- 
tru On- 

4 > = , n = 1, 2, ...,N , gdy Ip diagonalne , (2.139) 

J-Fnn 

jako szczegolny przypadek nieroujnosci RC, gdzie F„ jest estymatorem On parametru On- 

2.3.2.3 Druga ujersja ujieloparametroujego TRC 

Niech = 0(y) = {9i(Y))f^i jest nieobciqzonym estymatorem parametru = co 
oznacza, ze zachodzi: 

= ^e[e(y)j, yPeeS. (2.140) 

(Oczekiujanq) macierzq koiuariancji^'' Ve [0] nieobciqzonego estymatora uj bazie nazyujamy 
d X d - ujymiaroujq macierz o elementach: 

Ve^J[e]:=Ee[mY)-e,){ej{Y)-9j)\ , i,j = l,2,...,d, VPeG5. (2.141) 
Zachodzi nast^pujqce tujierdzenie. 

Wieloparametrouje Tujierdzenie RC (ujersja druga): Macierz koiuariancji Ve [0] nieobciqzonego es- 
tymatora speinia nieroujnosc [6]: 

^e[e]>/^^(0) VP0G5, (2.142) 

CO oznacza, ze macierz Ve[0] — /^^(0) jest dodatnio poiokreslona. 

Estymator efektytuny: Nieobci^zony estymator speiniajqcy roujnosc uj nieroujnosci (2.142): 

Ve[e]=Ip\e) VP0G5. (2.143) 
nazyujamy estymatorem efehtywnym parametru 0. 



^Czyli tziu. macierzq oczekimanego bl^du kuiadratouiego. 
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2.4 Entropia informacyjna Shannona i entropia irzgl^dna 



W rozdziale tym omoiuimy poj^cie, ktore podaje globalnq charakterjjstyk^ pojedynczego roz- 
kiadu praujdopodobienstuja, tzn. entropi^ Shannona. Dokiadniejsze omoujienie ujiasnosci entropii 
Shannona mozna znalezc uj [20]. Z tresci ponizszych przykiadouj ujynika jaki jest rozmiar proby N. 

Entropia Shannona: Niech P{ui) b^dzie rozkiadem praiudopodobiehstiua^'^ okreslonym na prze- 
strzeni zdarzeh 0, gdzie a; jest puntem u; 0. JesH przestrzeh zdarzeh $7 jest dyskretna, to informacyjna 
entropia Shannona jest zdefinioujana nast^pujqco: 

Sh (P) = -kY, Pi^) In Pi^^) , (2.144) 
we fi 

gdzie k jest Hczbq dodatniq^^, ktorq przyjmiemy dalej jako roujnq 1. 



Rozklad pratxidopodobienstuja jako element sympleksu rozkladotxi: Niech Q jest rozpi^ta przez 
skohczonq Hczb^ H elementou; b^dqcych mozHujymi ujynikami dosujiadczenia, uj rezultacie ktorego 
otrzymujemy ujartosci y^, i = 1,2, ii, zmiennej losoujej Y. Rozkiad praujdopodobienstuja P jest 
ujtedy reprezentoujany przez ujektor p = {pi)f^i , nalezqcy do sympleksu rozkladow prawdopodo- 
bienstwa [20], tzn. jego 'R shtadowych spetnia warunhi: 

K 

Pi>0 oraz = 1 . (2.145) 

1=1 

m-Sympleks rozkladow prawdopodobienstwa, czyli zbior A'" = {{pi,p2, ...,Pm,Pm+i) £ R"^"*"^; 
Pj > 0, j = 1, ...,m + 1 gdzie m + 1 < b^, dla Y1Y=^ — zbiorem wypuklym, tzn. kazdy 

punkt pm G A'" mozna przedstaujic jako Pm = Y17=i^ ^iPi^ gdzie X^™^^ Aj = 1 . 



Entropia Shannona (2.144) rozkiadu (2.145) ma postac: 

SH{P) = -Y.P^\rip^. (2.146) 
i=l 

Zapis Sh{P), gdzie uj argumencie pomini^to oznaczenie zmiennej losotuej Y podkresla, ze jedynq 
rozwazanq przez nas cechq zmiennej losowej jest jej rozkiad prawdopodobienstwa P. 

^''Przestrzen stanoin modelu: Moiuimy, ze na przestrzeni zdarzeri Q, zostaia okreslona funkcja cj P{^) speiniaj^ca 
luarunki, P(cj) > oraz J]] P(cj) = 1, nazyiuana iiitedy miarq probabilistyczn^.Zbidr u;szys(feic/i miarpro6abi(istj;czrij;ch 

UJ 

okreslonych na Q tworzy przestrzen stanow modelu. 

W przypadku statystycznej entropii flzycznej K moze bye np. liczbq honfiguracji ohreslonej Uczy molehul przy zadanej 
energii cathowitej uhtadu. Wtedy k jest utozsamiane ze staiq Boltzmann'a ks ■ Dla ukladu okreslonego m przestrzeni ciqglej 
R'^ liczba konfiguracji jest nieskonczona. Gdyby ograniczyc si§ do skoriczonej podprzestrzeni i podzielic jq na komorki o 
skonczonej luielkosci, i podobnie uczynic lu przestrzeni p^domej, to liczba mozlimych konfiguracji ukiadu byiaby skoriczona 
a jego entropia moglaby bye policzona. Jednakze popramny rachunek entropii luymaga ujtedy utozsamienia konfiguracji 
pomiedzmy n czqstek rozniqcych si^ jedynie ich permutacjq, ui ramach jednej klasy roujnomaznosci. Na fakt, ze ujlasciiua 
przestrzen proby ma uj tym przypadku nie K lecz K/n! punktom ziurocil umag^ Gibbs, a otrzymanq przestrzen proby 
nazyma si^ przestrzeni^ proby Gibbsa. Np. dla 1 cm"^ cieczy uj zuiyklych marunkach n ~ 10^^. Problem ten nie b^dzie 
roziuazany dalej w niniejszym skrypcie. 
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2.4.1 Interpretacja entropii Shannona 

Maksymalna mozliiua martosc entropii Shannona^^ tuynosi In H i jest osiqgni^ta, gdy ujszystkie 
ujyniki roujno praujdopodobne (pi = tzn. gdy stan ukiadu jest maksymalnie zmieszany. 

Ukiad uj stanie czystym: Gdy jeden z ujynikouj jest peujny, ujtedy tylko jedna, odpoujiadajqca mu 
ujspoirz^dna ujektora p jest rouina jeden, a pozostaie sq roiune 0. Moujimy ujtedy, ze uklad znajduje 
si^ UJ stanie czystym, a odpoujiadajqca mu ujartosc entropii Shannona jest minimalna i roujna zero. 

Entropia jako miara niepemnosci ujyniku eksperymentu: Z poujyzszych przykiadouj mozna ujnio- 
skoujac, ze entropi^ Shannona mozna interpretoujac jako miar^ niepewnosci otrzymania wyniku 
eksperymentu b^dqcego reaUzacjq rozkiadu pratudopodobiehstuja P lub inaczej, jako ujielkosc in- 
formacji koniecznej do okreslenia ujyniku, ktory moze si^ pojaujic u; rezultacie przeproxuadzenia 
eksperymentu na ukiadzie. 

Podstaujouje ujiasnosci entropii Shanonna mozna znalezc uj [20]. 

2.4.2 Przypadek ciqglego rozkiadu pravudopodobienstiua 

Przejscie z dyskretnego do ciqgiego rozkiadu praxudopodobiehstuja polega na zastqpieniu sumo- 
ujania uj (2.146) caikouianiem po caiym zakresie zmiennosci zmiennej losoujej Y. W ten sposob 
otrzymujemy Bohzmanoujsk^ postac entropii Shannona: 

+ 00 



Jednakze dla peujnych funkcji rozkiadu P(y), caika (2.147) moze nie bye okreslona. 

Czysty Stan klasyczny: Jako ilustracj^ poujyzszego stujierdzenia rozujazmy sytuacj^ [20], gdy rozkiad 
i-'(y) przyjmuje uj przedziale [0, t] xuartosc i zero ujsz^dzie poza tym przedziaiem. Wtedy jego 
entropia Sh{P) jest roujna In t i dla t ^ dqzy do minus nieshonczonosci. Procedura ta odpoujiada 
przejsciu do punktoujego, czystego stanu klasycznego opisanego dystrybucjq delta Diraca, dla ktorej 



Zatem przyjmujqc poziom zeroujy entropii jako punkt odniesienia, dokiadne okreslenie stanu opi- 
sanego deltq Diraca (ktorej lizycznie mogiby odpoiuiadac nieskonczony skok uj g^stosci rozkiadu 
substancji czqstki) ujymaga dostarczenia nieskohczonej ilosci informacji o ukiadzie. Do spraujy po- 
ujrocimy uj jednym z kolejnych rozdziaiouj. 

Problem transformacyjny ^//(P): Delinicja (2.147) ma peujien formalny minus, zujiqzany z bra- 
kiem porzqdnych ujiasnosci transformacyjnych entropii Shannona. Omotuimy go ponizej. 

Ze ujzgl^du na unormomanie praujdopodobiehstuja do jednosci, g^stosc rozkiadu praujdopodobieh- 
stiua przeksztaica si^ przy transformacji ukiadu ujspoirz^dnych tak jak odujrotnosc obj^tosci. 



Ze Luzgl^du na marunek ^ Pi = 1 maksymalizujemy funkcji a r (P) = Sh (P) — A ( 1 — X] Pi ) , liczqc pochodnq 

i = l \ 1=1 / 

po Pj, j = 1, 2, N , gdzie A jest czynnikiem Lagrange'a. 




(2.147) 



Sh{P) = -oo. 



K 
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Przykiad zmiennej jednoiuymiaroujej: Z unormoujania dy P (y) = 1 tuynika, ze P{y) musi 
transformoujac si^ tak, jak 1/y. 

Roztuazmy transformacj^ ukiadu tuspoirz^dnych y — > y'. Rozniczka zmiennej y transformuje si§ 



Roziuazmy teraz entropi^ Shannona ukiadu okreslonq dla rozkiadu ciqgiego jak uj (2.147), Sh{P) 
= — / dy P (y) In P (y). Jak to zauujazylismy poujyzej, entropia ukiadu jest miarq nieuporzqdkouja- 
nia w ukiadzie, hqdz informacji potrzebnej do okreslenia ujyniku eksperymentu. Zatem roujniez i ona 
poujinna bye niezmiennicza przy rozujazanej transformacji. Niestety, chociaz miara probabilistyczna 
pozostaje niezmiennicza, to ponieujaz InP (y) 7^ InP' (y') zatem SniP) 7^ Sh{P')- 

Tak uji^c logarytm z g^stosci rozkiadu prawdopodobienstwa niejest niezmienniczy przy transfor- 
macji ukiadu wspolrzqdnych i uj konsekujencji otrzymujemy nast^pujqcy ujniosek, siuszny roujniez 
UJ przypadku rozkiadu praujdopodobienstuja ujieloujymiaroujej zmiennej losotuej Y. 

Wniosek: Entropia Siiannona (2.147) nie jest niezmiennicza przy transformacji ukiadu ujspoirz^d- 
nych przestrzeni bazomej B. 

Z drugiej strony, ze ujzgl^du na ujyjqtkouje posrod innych entropii ujiasnosci entropii Shannona 
dla rozkiadu dyskretnego [20], zrezygnoujanie z jej ciqgiej granicy (2.147) mogioby si^ okazac decyzjq 
chybionq. Roujniez jej zuji^zek z informacji Fishera omoujiony dalej, przekonuje o istotnosci poj^cia 
entropii Shannona uj jej formie ciqgiej. 

Entropia ujzgl^dna jako rozujiqzanie problemu transformacji: Proste rozujiqzanie zaistniaiego pro- 
blemu polega na zaobserujoujaniu, ze ponietuaz iloraz dujoch g^stosci P{y) oraz Prefiy) transformuje 
si^ jak skalar, tzn.: 



gdzie Prefiy) ujyst^puje jako peujien rozkiad referencyjny, zatem ujielkosc nazyujana entropiq wzgl^d- 
nq: 



ujtedy zgodnie z dy' = J{y )dy, gdzie J jest jacobianem transformacji, natomiast rozkiad praujdo- 
podobienstuja transformuje si^ nast^pujqco: P'{y') = J^^(^)P(y). Zatem tak jak to poiuinno bye, 
unormoujanie rozkiadu uj transformacji pozostaje niezmiennicze, tzn.: 




(2.148) 



P'jy') _ J-'i^)P(y) _ P{y) 



(2.149) 




(2.150) 



—00 



posiada juz wlasnosc niezmienniczosci: 

SH{P'\P'ref) = SH{P\Pref) 

przy transformacji ukiadu wspolrz^dnych. 



(2.151) 
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Entropia luzgl^dna jako irartosc oczekiiuana: Ziurocmy uujag^, ze entropia ujzgl^dna jest ujarto- 
sciq oczekituanq logarytmu diuoch rozkiadouj, P(y) oraz Pref{y), zmiennej Y: 

SH{P\Pref) = Ep (^ln-£^) , (2.152) 
luyznaczonq przy zaiozeniu, ze zmienna losouja Y ma rozkiad P. 



Entropia ujzgl^dna a analiza doboru modelu: W ten sposob problem logarytmu ilorazu funkcji mia- 
rygodnosci (czy m szczegolnosci demiancji) mykorzystymanego m analizie braku dopasomania modelu 
(por. Rozdziaiy 1.2-1.3), pomrocii w postaci koniecznosci mpromadzenia entropii mzgl^dnej. Istotnie, 
uiiemy, ze poj^cie logarytmu ilorazu rozkladouj okazaio si^ juz uzyteczne iv poromnymaniu modeli 
statystycznych i myborze modelu bardziej "tuiarygodnego". Wybor modelu pominien bye niezmien- 
niczy ze ujzgl^du na transformacj^ ukiadu ujspoirz^dnych przestrzeni bazoiuej B. Logarytm ilorazu 
rozkiadotu posiada zqdanq miasnosc. Jego ujartosci^ oczekituan^, ktora jest entropiq mzgl^dnq, zaj- 
miemy si^ w Rozdziale (2.4.3). Przez mzglqd na zmiqzek IF z entropiq mzgl^dn^ dla rozkiadom rozniq- 
cych si^ infinitezymalnie maio, jej poj^cie b^dzie nam tomarzyszylo do konca skryptu. 



Nazujy entropii ujzgl^dnej: Entropi^ mzgl^dnq (2.150) nazyujana si^ romniez entropi^ Kullbacka- 
Leiblera (KL) lub dyiuergencjq informacji. 



2.4.3 Entropia ujzglf dna jako miara odlegJosci 

Roztuazmy eksperyment, ktorego xuyniki sq generoiuane z pexunego okreslonego, chociaz niezna- 
nego rozkiadu pramdopodobienstiua P^e/ nalezqcego do obszaru O. Obszar O jest nie posiadajqcym 
izolotuanych punktom zbiorem rozkiadom pramdopodobienstuja, ktory jest przestrzeniq metrycznq 
zupelnq. Oznacza to, ze na O mozna okreslic odleglosc oraz kazdy ciqg Cauchy'ego ma granic^ nale- 
zqcq do O. 



Tujierdzenie Sanova [26]: Jesli mamy N - ujymiaroujq probk^ niezaleznych pomiarouj pochodzq- 
cych z rozkiadu pramdopodobienstma P^e/ pemnej zmiennej losomej, to pramdopodobienstmo Pr, 
ze empiryczny rozkiad (cz^stosci) V ujpadnie uj obszar O, speinia asymptotycznie zmiqzek: 

lim llnPr|pGO| = -/3 gdzie /3 = inf SniPolPref), (2.153) 

ktory UJ przyblizeniu mozna zapisac nast^pujqco: 

Pr{V G O) ~ e-^^«(^''l^"/) , (2.154) 

gdzie Po jest rozkiadem nalez^cym do O roznym od P^e/ z najmniejszq martosciq entropii ujzgl^dnej 
Sh {Po\Pref)- Rozkiad Po uznajemy za rozkiad myestymomany na podstamie empirycznego roz- 
kiadu cz^stosci V otrzymanego w obsermacji. 



Wniosek: Zaumazmy, ze Tujierdzenie Sanova jest rodzajem prauja ujielkich liczb, zgodnie z ktorym 
dla ujielkosci proby N dqzqcej do nieskonczonosci, prawdopodobienstwo zaobserwowania rozkiadu 
czfstosci V nalezacego do O roznego od prawdziwego rozktadu Pref (tzn. tego ktory generotuai 
ujyniki eksperymentu), dqzy do zera. 
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Fakt ten ujyraza ujlasnie relacja (2.154), a ponietuaz Sh {Po\Pref) jest w jej tuykiadniku, zatem en- 
tropia wzgl^dna okresla tempo w jakim prawdopodobienstwo Pr{V) dqzy do zera wraz ze wzro- 
stem N. 

Entropia ujzgl^dna dia rozkiadoir dyskretnych: Jesli Pre/ = (p*)f=i jest dyskretnym rozkiadem 
praiudopodobienstiua o H mozlituych luynikach, ujtedy rozkiad Po = {Po)f=i G O jest tez dyskret- 
nym rozkiadem o H ujynikach, a entropia ujzgl^dna Sh {Po\Pref) ma postac: 

^ i 

SH{Po\Pref)=Y.PO^^^ ■ (2-155) 
i=l P 

DIa rozkiadouj ciqglych entropia ujzgl^dna zostaia okreslona w (2.150). Przekonamy si^, ze entropia 
ujzgl^dna jest miarq okreslajqcq jak bardzo duja rozkiady rozniq si^ od siebie. 

Przykiad: W celu ilustracji tujierdzenie Sanova zaiozmy, ze przeproiuadzamy dosujiadczenie rzutu 
niesymetrycznq monetq z ujynikami orzei, reszka, zatem H = 2. Rozkiad teoretyczny P^e/ jest lui^c 
zero-jedynkoujy. Natomiast w w^^niku pobrania N-elementowej probki dokonujemy jego estymacji 
na podstawie rozkladu empirycznego V cz§stosci pojawienia si? wynikow orzei lub reszka. Zatem: 



Pref = ip^' = {p,l- p) oraz V = {rm' = 1 _ _ j . (2.156) 

Tujierdzenie Bernoulliego mouji, ze praujdopodobienstujo pojaujienia si^ ujyniku orzei z cz^stosciq 
m/N w A'^-losoujaniach ujynosi: 



Biorqc logarytm naturalny obu stron (2.157), nast^pnie stosujqc siuszne dla duzego n przyblizenie 

f n\ 

Stirlinga, Inn! nlnn — n, dla kazdej silni uj ujyrazeniu , i uj koncu biorqc eksponent^ obu 

stron, mozna otrzymac [20]: 

Pr{P) ^ e-^^«(^l^'-^) , (2.158) 

gdzie 

i=l ^ 

W ostatnej rouinosci skorzystano z (2.156) otrzymujqc entropi^ uizgl^dnq (2.155) dla przypadku liczby 
ujynikoui H = 2. 



Podsumoujanie: W poujyzszym przykiadzie entropia ujzgl^dna Sh \ T^\Prefj pojaujiia si^ jako po- 
j^cie ujtorne, ujynikajqce z ujyznaczenia prauidopodobienstuja otrzymania uj eksperymencie empi- 
rycznego rozkiadu cz^stosci V ^ O jako oszacoiuania rozkiadu Pre/- Fakt ten oznacza, ze entropia 
wzgl§dna nie jest tujorem sztucznym, ujproujadzonym do teorii jedynie dla ujygody jako "jakas" miara 
odlegiosci pomi^dzy rozkiadami, lecz, ze jest wlasciwq dla przestrzeni statystycznej rozhladow 
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miarq probabilistycznq tej odleglosci, tzn. "dyujergencjq informacji" pomi^dzy rozkladami. Okaze 
si^ tez, ze sposrod innych miar odleglosci jest ona ujyrozniona poprzez jej zujiazek ze znanq juz nam 
informacjq Fishera. 

W koncu podamy ttuierdzenie o dodatniosci entropii tuzgl^dnej, ktore jeszcze bardziej przyblizy nas 
do zrozumienia entropii jako miary odleglosci pomi^dzy rozkladami, rozujijanego u; tresci nast^p- 
nego rozdziaiu. 

Tiuierdzenie (Nieroiunosc informacyjna): Jesli P(y) oraz Pre/(y) dujoma rozkladami g^stosci 
praiudopodobiensttua, lutedy entropia ujzgl^dna speinia nast^pujqcq nieroujnosc: 

Sh {P{y)\Pref{y)) > , (2.160) 
i nieroujnosc ta jest ostra za ujyj^tkiem przypadku, gdy P(y) = Prefiy) [13]. 



2.5 Geometria przestrzeni rozkladoir prairdopodobieristira i metryka Rao- 
Fishera 

Poj^cie metryki Fishera ujproujadzilismy juz uj Rozdziale 2.2. Do uj^cia tam przedstaiuionego doj- 
dziemy jeszcze raz, ujychodzqc od poj^cia entropii ujzgl^dnej. 

Roztuazmy diuarozkiady praiudopodobiehstuja: P = oraz P' = P+dP = (p'* = 

rozniqce si^ infinitezymalnie malo, przy czym 7^ dla kazdego i. Rozkiady P oraz P' speiniajq 

marunek unormoujania Ylii=i = 1 oraz Yli=i + dp^ = skqd: 

^dp' = Q. (2.161) 

i=l 

Ponieujaz dp^ jp^ jest ujielkosciq infinitezymalnie maiq, zatem z rozujini^cia: 

Mi+;??)=;^-i/2(%+... (2.162) 

otrzymujemy, ze entropia KL rozkiadouj P oraz P' ujynosi: 

Su {P\P + dP) = y p^ In = - V pMn ^lyW^ (2. 163) 

Ostatnia postac Sh {P\P + dP) sugeruje, ze entropia KL okresla uj naturalny sposob na przestrzeni 
statystycznej S infinitezymalny ktuadrat odleglosci pomi^dzy rozujazanymi rozkladami, co onacza- 
ioby roujniez lokalne okreslenie na przestrzeni statystycznej S peujnej metryki. Do jej zujiqzku z 
metrykq Rao-Fisher'a ujproujadzonq uj Rozdziale 2.2 poujrocimy pozniej. 

Infinitezymalny interujai uj S: Niech dp = {dp^, dp^) jest infinitezymalnym luektorem uj prze- 
strzeni rozkiadouj praujdopodobieristuja, speiniajqcym ujarunek (2. 161). Wproiuadzaj^c na przestrzeni 
statystycznej S aparat matematyczny geometrii rozniczkoujej [6], zapiszmy ktuadrat rozniczkotuego in- 
terujaiu uj tej przestrzeni nast^pujqco: 

ds^ = gijdp'dp) . (2.164) 
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W celu uzgodnienia (2.163) z (2.164) ujproujadzmy na S metryk^: 

9ij = ^ • (2-165) 

Zujiqzek (2.164) oznacza, ze liczba mozliwijch wijmkdw H okresla wymiar przestrzeni S oraz, ze 
entropia ujzgl^dna KL definuje dla infinitezymalnie bliskich rozkiadoiu symetrycznq metryk^ na prze- 
strzeni statystycznej S, pozujalajqcq mierzyc odlegiosc pomi^dzy tymi rozkiadami. Zast^pujqc prauj- 
dopodobieristuja cz^stosciami, metryka ta staje si^ statystykq zruiqzana z obserujoujanq informa- 
cyjnq Fishera ujproujadzonq poprzednio. 

Poujyzej Stan ukiadu okreslony byl uj reprezentacji rozkiadu praujdopodobienstuja zmiennej loso- 
ujej, tzn. okreslony byl przez podanie rozkiadu praujdopodobienstuja. Dujom infinitezymalnie blisko 
lezqcym stanom opoujiadaiy rozkiady P oraz P'. 

Reprezentacja amplitudotjja S: Gdy interesujq nas czysto geometryczne ujiasnosci metryki Fishera, 
ujtedy ujygodne jest uzycie innej reprezentacji do opisu stanu ukiadu, okreslonej nast^pujqco. Niech 
Q = {Q')f=i oraz Q' = {q"')f^i = (g* + dq^)f^i opisujq te same co poprzednio, duja infinitezymalnie 
blisko lezqce stany ukiadu tyle, ze zarzqdajmy, aby infinitezymalny kujadrat interujaiu pomi^dzy nimi 
(2.164) byl roujny: 

K 

= 4^dqidg* . (2.166) 

i=l 

Poroujnujqc formui^ (2.166) z (2.164) zauujazamy, ze zgadzajq si^ one z sobq o ile Q = (q^)^ oraz 
P = (p*)^ sq poujiqzane zujiqzkiem: 

dq' = ^^ i = l,...,i<, (2.167) 
2 VP* 

CO zachodzi ujtedy gdy 

q' = y^i i = l,...,^. (2.168) 

Wielkosci nazyujamy amplitudami uktadu^^ . Definujq one na S nouje ujspoirz^dne, dla ktorych 
> dla kazdego i. 

S z geometriq jednostkoujej sfery: Otrzymana uj bazie geometria S jest geometric jednostko- 
ujej sfery, tzn. ze ujzgl^du na unormomanie rozkiadu praujdopodobienstuja do jednosci, amplitudy 
speiniaj^ nast^pujqcy ujarunek unormomania na promieniu jednostkoujym: 

^p^ = J2q'q' = l. (2.169) 

i=l 1=1 

Na sferze tej mozemy okreslic odlegiosc geodezyjnq P>Bhatt, tzuj. odlegiosc Bhattacharyya' pomi^dzy 
dujoma rozkiadami praujdopodobienstuja P oraz P', jako diugosc kqtoujq liczonq ujzdiuz koia tuiel- 
kiego pomi^dzy dujoma ujektorami Q oraz Q' o skiadotuych b^dqcych amplitudami q^ = ^/p* oraz 
q = y p 



Fisher korzystal z amplitud praujdopodobienstuja niezaleznie od ich pojaujienia siq w mechanice kujantoujej. 
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Odlegiosci Bhattacharyya: Kiuadrat infinitezymalnego intertuaiu (2.166) jest przykiadem odlegio- 
sci Bhattacharyya, ktorq ogolnie okreslamy nastepujqco: JesH P = (p*) oraz P' = (p'*) rozkiadami 
pratudopodobiehsttua, tutedy odiegiosc Bhattacharyya pomi^dzy Q oraz Q' jest iloczynem tueujn^trz- 
nym okreslonym na przestrzeni statystycznej S nast^pujqco: 

COS DBhatt = Y.'i'l" = Y. = B{P,P) ■ (2.170) 

i=l 1=1 

Statystyczna odleglosciq Bhattacharyya wyglqda wi§c jak iloczyn wewn^trzny mechanihi hwan- 
towej. W kolejnych rozdziaiach przekonamy si§, ze nie jest to bi^dne skojarzenie. 

Hessian entropii Shannona: Zaumazmy, ze metryka gij jest Hessianem (tzn. macierzq drugich po- 
chodnych) entropii Shannona: 

9., = -d.d,Su ip) = ^g- ^P' In/ = -J > , (2.171) 

k=l 

zgodnie z (2.165). Potuyzszy ztui^zek oznacza, ze fakt xukl^siosci entropii Shannona [20] daje dodatniq 
okreslonosc metryki g^j na S. 

Metryka indukoiwana z gij: Uzasadnijmy fakt nazujania czasami metryki g^j, (2.165), metrykq Rao- 
Fishera. 

Zaiozmy, ze interesuje nas pemna podprzestrzeh przestrzeni rozkiadom pramdopodobiehsttua S. 
Wproujadzmy na niej ukiad mspoirz^dnych 0". Korzystajgc z (2.165) midac, ze metryka gij = ^ 
indukuje w tej podprzestrzeni S metryk§: 

A dp' dp> A dap'dbp' \^ ir. . . i 

= 2^ gg^Qfb 9^J = 2^ i =2^Pda Inp d, hip 

i,j=l i=l i=l 

= E {dale dbie) = EeiF (6) = Ip (9) . (2.172) 
gdzie skorzystano z zapisu £e = I {y\Q) = InP (9) = (hip* (9))f^^ oraz da = 8/ 86"-, (2.35). 

W Rozdziale 2.2 me mzorze (2.36) zdefinioujahsmy metryk^ Rao-Fishera jako gab = E^{8a£e db^e)- 
Tak uji^c ostateczne otrzymahsmy zgodnosc naztuania metryki (2.165) metrykq Rao-Fishera. Metryka 
gij jestjednak wielkosciq obserwowanq a nie oczekiwanq, tak jak metryka Rao-Fishera gab- 

Metryka Roa-Fishera zapisana w amplitudach: Korzystajqc ze ziuiqzku = y^, (2.168), pomi^dzy 
pramdopodobiehstmami i amphtudami, metryk^ Rao-Fishera (2.172) w reprezentacji amphtudomej 
mozna zapisac nast^pujqco: 
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Przejscie do zmiennej ciqgiej: Gdy liczba parametrouj 9"" (lui^c i luektoroiu bazoujych O"") rozpi- 
najqcych osie ukiadu luspoirz^dnych roziuazanej podprzestrzeni statystycznej jest skonczona, ujtedy 
mozna dokonac nast^pujqcego uogolnienia metryki na przypadek ciqgiego rozkiadu pramdopodo- 
bienstiua P{y) zmiennej losoiuej Y: 

9ab = dy^^^^p^ ^ ly'^^^ ^ ^ " " ' ^^'^^"^^ 

gdzie, ponieujaz przestrzen zdarzen ciqgiego rozkiadu praiudopodobieristuja jest nieskonczenie ujy- 
miarouja, u; miejsce sumotuania po i = 1, pojaujiio si^ caikoujanie po ujartosciach y G 3^ 
zmiennej losoujej Y. Otrzymana postac metryki jest jaujnie niezmiennicza ze ujzgl^du na zmian^ 
ukiadu ujspoirz^dnych y — )• y' uj przestrzeni bazoujej 3^. 

Na koniec, dokonujqc reparametryzacji i przechodzqc do amplitud q{y\Q) = \fP{y\Q) , mozna me- 
tryk^ (2.174) dla przypadku rozkiadu ciqgiego zapisac nast^pujqco: 

5afe = 4 / dydaq{y\e) dMQ) , (2.175) 
Jy 

gdzie jaujnie zaznaczono zaleznosc amplitudy rozkiadu od parametru Q. 



Przypadek funkcji ujiarygodnosci: Poujyzsza analiza dotyczyia przypadku proby = 1 - ujymiaro- 
ujej. Gdyby rozkiadem praujdopodobienstuja P byia funkcja ujiarygodnosci proby, ujtedy uj miejscu 
zmiennej losoujej Y pojaujiiaby si^ proba Y = {Yn)^=i, a u; miejscu przestrzeni y, przestrzen proby 
B. Poza tym, rozujazania u; obecnym rozdziale pozostaiyby takie same [6]. 

Omotuinq sytuacj^ odlegiosci na przestrzeni statystycznej przedstatuia gralicznie ponizszy rysunek 
dla liczby parametrouj d = 2. 




Dla dwoch infinitezymalnie 

bliskich rozkfaddw. P oraz F=P+dP 

d 

ds^ — gghdO^ d6^ gdzie g^ij jest metryk^ Rao-Fishera 
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Przykiad: Wyznaczyc kujadrat infinitezymalnego interiuaiu dla diuoch stanou; posiadajqcych roz- 
kiad normalny N{^, a). Rozkiad normalny ma postac: 

P(y,/i,c7) = ^^e-^, (2.176) 



gdzie ujektor parametrouj = {0"')a=i = (/^jO")^- Macierz informacyjna Fishera dla rozkiadu 
normalnego N{fi, a) ma ujyznaczonq poprzednio postac (2.24). Zatem metryka Rao-Fishera na 2- 
ujymiaroujej przestrzeni normalnych rozkiadovu praujdopodobienstiua z ukiadem ujspoirz^dnych 
fi, a ma (dla proby N = 1), postac: 



(gab) = If (6) = EeiF{e)=l^^ _^ j , (2.177) 
tzn. skiadoiue metryki (2.174) sq roujne: 



1 2 
5mm = ^ ' 9^J.'^ = 9cTfi = , 9uu = ^ ■ (2.178) 

Zatem otrzymany kujadrat infinitezymalnego interujaiu na 2-ujymiaroujej (pod)przestrzeni statystycz- 
nej S ujynosi [20]: 

ds^ = g^i^id^'^ + g^^dfida + g^ada'^ = (d/u^ + 2da^) . (2.179) 

Odpoujiada on metrce Poincarego ze staiq ujemnq krzyujizn^. W koncu, z postaci rozkiadu (2.176) 
otrzymujemy roxuniez baz^ in przestrzeni stycznej do S: 

9,,lnP(y|(/.,a)) = ^ , 5.1nP(y|(/.,a)) = ^^^^ - - . (2.180) 

Wniosek z przykiadu: Na osi /i, na ktorej a = lezq punkty odpowiadajqce hlasycznym stanom 
czystym i sq one zgodnie z (2. 1 79) nieshonczenie daleko odlegle od dowolnego punktu we wn^trzu 
gornej polplaszczyzny a > 0. W konsektuencji oznacza to, ze ujynik peujny, ktoremu odpoujiada 
rozkiad klasyczny z o" = 0, jest iatujy do odroznienia od kazdego innego. 



2.6 Informacja Fishera 

2.6.1 Informacja Fishera jako entropia 

W poujyzszych roziuazaniach informacja Fishera Ip pojaujiia si^ poprzez nieroujnosc Rao-Cra- 
mera (2.115), jako ujielkosc okreslajqca graniczn^ dobroc procedury estymacyjnej parametru roz- 
kiadu, tzn. o ile estymator efektyiuny istnieje, to informacja Fishera okresia minimainq ujartosc jego 
tuariancji. Ponieujaz im informacja Fishera mniejsza, tym to graniczne oszacoxuanie parametru gor- 
sze, zatem jest ona roujniez miarq stopnia nieuporzqdkoujania ukiadu okreslonego rozkiadem prauj- 
dopodobiehstuja. Takie zrozumienie informacji Fishera odnosi si^ do typu analizoujanego rozkiadu 
praujdopodobiehstuja i jako miara nieuporzqdkoujania rozkiadu oznacza brak przeujidyujalnosci pro- 
cedury estymacyjnej (sprobuj pomyslec o sensie oszacoujania ujartosci oczekiujanej rozkiadu jedno- 
rodnego). 

Ponizej uzasadnimy stujierdzenie, ze informacja Fishera okazuje si^ bye proporcjonalna do entropii 
KuIIbacka-Leiblera rozkiadouj rozniqcych si^ infinitezymalnie maio w parametrze rozkiadu [8]. 
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Szukany ziuiqzek informacji Fishera z entropiq Kullbacka-Leiblera pokazemy uj trzech krokach. Roz- 
ujazmy A^-ujymiarouj^ prob^ Yi, I2, ^A^, gdzie kazda ze zmiennych losotuych ¥„, jest okreslona na 
przestrzeni y i posiada rozkiad praiudopodobienstiua p (yn|^)- Przyjmijmy, dia uproszczenia roziua- 
zan, ze = jest parametrem skalarnym. 

(1) Funkcja luiarygodnosci P{y \9) ma postac: 

N 

Piy\0) = llpn{yn\9) , (2.181) 

71=1 

gdzie y = (y„)^=i jest realizacjcj proby. 

Zaumazmy, ze informacji Fishera parametru 9 okreslonq w (2.14) i (2.3): 

gdzie ;S jest przestrzeni^ proby, ady = d'^y = dy\dy2---dyN, mozna zapisac nast^puj^co: 

Istotnie, postac (2.183) otrzymujemy z (2.182) po skorzystaniu z: 

d f dinP \_ d (idP\_ 1 fdpy 1 fd^P\ 

d9\d9~)~d9\P~d9)~~P^\d9) P \~dW ) ^ ' 

oraz vuarunku reguralnosci poztualajqcego na ujyiqczenie rozniczkomania po parametrze przed caik^ 
(por. Rozdziai 2.1.1): 

(2) Zadanie: Pokazac, ze zachodzi nast^pujqcy rozkiad informacji Fishera parametru 9: 

If = Y^ iFn gdzie = / dy„p„ {yn\9) ( ^^"^^^^"'^^ ) ' , (2.186) 

n=i y \ / 

na skiadouje informacje Ipn, zalezne jedynie od rozkiadou; punktoujych Pn(y|^)- 
Rozujiqzanie: Po skorzystaniu z (2.181) zautuazamy, ze: 

lnPiy;9) = J2lnp^, zatem ^ = E^^ (2-187) 

n=l n=l 

i podnoszqc ostatnie ujyrazenie do kujadratu otrzymujemy: 

/ainPy ^ 1 1 dprndpn , 1 f OpnV ,niaa\ 
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Wstaujiajqc (2.181) oraz (2.188) do (2.183) otrzymujemy: 



N N 



If= j dy Y[ Pk X] 



J 1 dpmdpn 

PrnPn 96 36 



(2.189) 



Ze ujzgl^du na luarunek normalizacji rozkiadoiu brzegoujych: 

dynPn{yn\6) = 1 , 



y 



(2.190) 



w (2.189) z iloczynu Jl^i Pk pozostaje w piertuszym skladniku jedynie PmPn (dla k ^ m oraz k ^ n), 
natomiast uj drugim skladniku pozostaje jedynie p„ (dla k / n), tzn.: 



Jy Jy 96 86 ^Jy Pn \ 99 J 

W koncu, ze ujzgl^du na: 

, 9pn 9 f ^ T n 

pierujszy skiadnik uj (2.191) zeruje si^ i pozostaje jedynie drugi, zatem: 



n=l ^ ^ \ / n=l ~^ 



iPr, 



9lnpn 
96 



Ostatecznie otrzymujemy uji^c szukany rozklad informacji Fishera (2.186): 



lF = ^lFn gdzie lFn= dynPn {yn\6) 
n=l y 



9lnpn {yn\6) 
99 



(2.191) 



(2.192) 



(2.193) 



(3) Zadanie: Znalezc zujiqzek informacji Fishera z entropi^ Kullbacka-Leiblera rozkiadouj P {y\9) 
oraz P (y\6 + A6) rozniqcych si^ infinitezymalnie maio uj parametrze 9. 



Rozujiqzanie: Zastqpmy calk^ uj (2.186) dla Ipn sumq Riemanna: 



Ifu 



Pn {ynk\9) 



Pn (ynk\6 + A9) - Pn {ynk\9) 



A9 



{A9)-^ Ay^Y, Pn {ynk\e) 



Pn iynk\9 + A9) 

Pn {ynk\9) 



1 



(2.194) 



Poujyzsza zamiana caikoujania na sum^ jest ujproujadzona dla ujygody i jest scisiym przejsciem uj 
granicy Ay„fc^^^O. W drugiej roujnosci uj (2.194) przyj^to roujne przyrosty Ay nk = Ay„ dla kaz- 
dego k, CO UJ tej granicy nie zmienia ujyniku. Natomiast przejscie dla pochodnej po 6 pod caikq Ipn 
UJ (2.186) dokonane uj (2.194) jest siuszne uj granicy — )• 0. 



69 



W granicy A9 — ^ kazde z pomyzszych ujyrazen p„ {ynk\0 + A9)/pn {ynk\0) dqzy do 1. Wtedy 
kazda z ujielkosci: 



_ Pn{ynk\0 + Ae) 

staje si^ maia i rozujijajqc funkcj^ logarytmu do xuyrazu drugiego rz^du: 
otrzymujemy: 

Korzystajqc z (2.195) oraz (2.197) ujyrazenie (2.194) mozna zapisac nast^pujqco: 

V- . |.^ 1 f Pniynk\0 + Aey 



(2.195) 

(2.196) 
(2.197) 



Ipn = -2(A0)-^Ay, 

- ^Pn(.ynk\0 + Ae)+^Pn{ynk\0) 



p{yk\o) 

, dla Ai9 ^ 



(2.198) 



Ze ujzgl^du na ujarunek normalizacji zachodzi Y^Pn {ynkW + = J2Pn (ynfcl^) = 1> zatem diuie 

k k 

ostatnie sumy po A; uj natuiasie kujadratotuym znoszq si§ luzajemnie i (2.198) redukuje si^ do postaci: 



Ipn = -2iA9y^Y,AynPn{ynk\0)ln( 
k ^ 

= -2{Aey^ [ dynPn{yn\e)in 

Jy 



Pniynk\0 + ^0) 
Pn {ynk\0) 

Pn {yn\0 + Ae) 
Pn {yn\0) 

2 (A0)-2 Sh [Pn {yn\e) \pn {yn\0 + AO)] , dla A0 ^ , 



(2.199) 



gdzie UJ ostatnim przejsciu skorzystalismy z (2.150). Postac Ipn uj drugiej lini uj (2.199) mozna roujniez, 
ujykorzystujqc unormoujanie rozkiadouj Pm{ym\&), zapisac nast^pujqco: 



-2^ f f 
Ipn = -2 (AB) ^ TT / dymPm{ym\0) / ^Yn Pn {yn\6) In 

m^i Jy Jy 



Pniyn\0 + ^0) 
Pn {yn\0) 



dla A9 0, (2.200) 



skqd po skorzystaniu z Ip = J2n=i ^Fn, (2.186), otrzymujemy: 

/f = V/Fn = -2{A9y^y] TT / dymPm{ym\0) [ dy^ Pn (yn|g) In f ^"^^"f t,^^^ 

^ ^1 Jy Jy V Pn iyn\0) 



n=l 



m^n 

N 



-2 {AOr I dy\{p„, {y^\e) In Hn^i Pnlyn^ + A 

Jti m=l V Y[n=lPn{yn\0) 

2{Aey'^ SH[P{y\0)\P{y\e + Ad)] , dla A^^O. 



(2.201) 



Tak uji^c (2.20 1) daje ujsparcie dla intuicji ujspomnianej na pocz^tku obecnego Rozdziaiu, ktora mouji, 
ze skoro entropia jest miar^ nieuporz^dkoujania ukiadu to informacja Fishera jest roujniez miar^ jego 
nieuporzqdkoiuania. 
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Uujaga o lokalnosci zujiqzku IF z KL: O ujiasnosciach globalnych rozkiadu luypoiuiada si^ entropia 
Shannona, natomiast luniosek luynikajqcy z (2.201) ma sens tylko dla entropii ujzgl^dnej. Zatem zujiq- 
zek ten moze bye eo najujyzej sygnaiem, ze niektore tuiasnosci ukladu ziuiqzane z entropiq Shannona 
mogq bye uj^te u; j^zyku informacji Fishera. Na niektore sytuacje, uj ktorych ma to miejsce ziurocimy 
uujag^ w przysziosci. 

Rozkiad entropii KL dla rozkladoiu punktoiuych: 

Ze ujzgl^du na Ip = X^„=i Ipn, (2.186), z poroujnania (2.201) z (2.199) tuynika dodatkoujo, ze entropia 
ujzgl^dna rozkiadouj P {y\9) oraz P {y\9 + Ad) jest sumq entropii ujzgl^dnych odpoujiadajqcych im 
rozkiadoiu punktoiuych p„ (yn|^) oraz PniYnlO + 



Sh [P {y\0) \P {y\e + AO)] = Y,Sh [Pn {yn\0) \ Pn {yn\0 + AO)] dla dowolnego AO . (2.202) 



Ponieujaz ujarunek — s- nie byi ujykorzystyujany uj otrzymaniu (2.202) z poroujnania (2.199) oraz 

(2.201) , zatem zujiqzek ten jest siuszny dla doujolnego A9. Natomiast nalezy pami^tac, ze rozkiady 
punktouje uj delinicji funkcji ujiarygodnosci s§ nieskorelowane dla roznych n, dlatego tez zujiqzek 

(2.202) jest shiszny tylko uj tym przypadku. 



2.7 Poj^cie kanatu informacyjnego 

Niech pierujotna zmienna losoma Y przyjmuje tuartosci ujektoroiue y € y. Wektor y moze bye 
np. ujektorem poiozenia. Zatem, aby ujproujadzony opis byi ujystarczajqco ogolny, ujartosci y = (y'^) 
mogq posiadac np. indeks ujektoroujy v. Wartosci te sq realizoujane zgodnie z iqcznym rozkiadem 
p(y|9) ujiasciujym dla badanego ukiadu. 

Roztuazmy A^-ujymiarouj^ prob^. Oznaczmy przez y = {yn)n=i = {yi,---,yN) dane b^dqce realiza- 
cjami proby Y = {Yi,Y2, ...,Y]\[) dla pierujotnej zmiennej Y, gdzie y„ = (y^) oznacza n-t^ xuekto- 
roujq obserujacj^ uj probce (n = 1,2,..., A^). Rozklad i^czny proby jest okreslony przez P {y\Q). 

Dodatkoujy indeks parametru: Podobnie, roujniez parametry rozkiadu mogq miec dodatkoujy in- 
deks. Niech indeks a okresla peujnq dodatkoujy ujspoirz^dnq luektoroujq parametru 9i, gdzie jak 10 
poprzednich rozdziaiach i = 1, 2, d. Zatem ujektor parametrouj ma teraz postac: 



N 



n=l 



e = {9i,92,...,9d) , gdzie = (0f) 



a = 1,2,... . 



(2.203) 



Wariancja estymatora 9f parametru 9f ma postac: 




(2.204) 



gdzie 9f (y) jest estymatorem parametru 9f , a caikoiuanie przebiega po caiej przestrzeni proby B, 
tzn. po ujszystkich mozliujych realizacjach y. 

Wediug Rozdziaiu 2.3.2.2, dla kazdego ujyroznionego parametru 9f ujariancja {9f) jego estymatora 
(2.221) jest ztuiqzana z informacjq Fishera Ipia parametru 9f poprzez nieroujnosc (2.138): 



[91) > IF > 



1 



(2.205) 
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gdzie Pp = p^'^"' jest dolnym ograniczeniem RC dla parametru Of w przypadku luieloparametro- 
wym, natomiast: 

lFioL = Ipia^ia (2.206) 

jest pojemnosciq informacyjnq uj pojedynczym kanale informacyjnym {i, a) czyli informacjq Fi- 
shera dla parametru Of. Zgodnie z (2.183) jest ona roujna^^: 

IF^o.^IF{e^o.) = j^dyP{y\e){^^^^^^^^ . (2.207) 
Informacja Stama: Wielkosc ^ ^- odnosi si^ do pojedynczego kanahi (i, a). Sumujqc jq po indek- 

^ \ i ) 

sach a oraz i otrzymujemy tzuj. informacjq Stama 1$ [27]: 

{)<is = yy —L- , (2.208) 

ktora jest skalarnq miarqjakosci jednoczesnej estymacji uje ujszystkich kanaiach informacyjnych. In- 
formacja Stama jest z definicji zawsze wielkosciq nieujemnq. 

Pojemnosc informacyjna /: W koncu, sumujqc leujq i praujq strong (2.205) po indeksach a oraz 
i otrzymujemy nastqpujqcq nieroiunosc dla 1$'- 

(2.209) 

gdzie C, oznaczana dalej jako /, nazytuana jest pojemnosciq informacyjnq ukladu. Zgodnie z (2.209) 
i (2.207) jest ona romna: 

Jak si§ okaze, pojemnosc informacyja I jest najujazniejszym pojqciem statystyki lezqcym u podstatu 
np. czionotu kinetycznych roznych modeli teorii pola. Jest ona uogolnieniem pojqcia informacji Fi- 
shera dla przypadku pojedynczego, skalarnego parametru na przypadek ujieloparametroujy. 

2.7.1 Pojemnosc informacyjna dla zmiennej losoujej polozenia 

Zaujqzmy obszar analizy do szczegolnego przypadku, gdy interesujqcym nas oczekiujanym para- 
metrem jest xuartosc oczekiujana zmiennej poiozenia ukladu Y: 

9 = E{Y) = (r) , gdzie 6"= [ dyp{y) . (2.211) 

Jy 

Wtedy A^-ujymiarouja probka y = {yn)n=i = (yii-'-^yAf) jest realizacjq proby Y dla polozen 
ukladu, a ujartosc oczekiujana 9n poiozenia ukladu uj n-tym punkcie (tzn. pomiarze) proby ujynosi: 

On = E{Yn) = (C) , gdzie 0^, = / dyP{y\Q)y';, . (2.212) 

Jb 



^PoroLunaj przejscie od (2.182) do (2.183). 
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Liczba oczekiiuanych parametrouj: Gdy, jak to ma miejsce lu roziuazanym przypadku, jedynym 
parametrem rozkiadu, ktory nas interesuje jest ujartosc oczekiujana poiozenia On = (^^), gdzie 
n = 1, 2, jest indeksem proby, ujtedy parametr luektoroiuy = {9n)n=v Zatem liczba pa- 
rametroiu On pokryia si^ z ujymiarem proby N, a indeksy parametru Of sq nast^pujqce: i = n, gdzie 
n = 1,2, ...,A^, oraz a = v, gdzie v jest indeksem tuektorotuym luspoirz^dnej y^. Oznacza to, ze 
tuy miar parametru jest taki sam jak ujymiar przestrzeni proby B. 



Wspoirz^dne koiuariantne i kontraiuariantne: Rozruazania obecnego Rozdziaiu jak i innych cz^- 
sci skryptu sq zruiqzane z analizq przeprotuadzanq w czasoprzestrzeni Minoiuskiego. DIatego koniecz- 
nym okazuje si^ rozroznienie pomi^dzy ujspoirz^dnymi kotuariantnymi y„j, i kontramariantnymi y^. 
Ziuiqzek pomi^dzy nimi, tak dla luartosci losoiuego luektora poiozenia jak i dia odpoxuiednich u;ar- 
tosci oczekiujanych, jest nast^pujqcy: 



Vu^j, On ; 

^J.=o 



(2.213) 



gdzie {rju/i) jest tensorem metrycznym przestrzeni y. W przypadku ujektoroujego indeksu Minkouj- 
skiego u = 0,1,2,3, ... przyjmujemy nast^pujqcq postac tensora metrycznego: 



(2.214) 
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lub uj skrocie (rju^, 




diag{l. 


-1, 


-1 





luymi elementami na przekqtnej gioujnej oraz zerami poza niq. Natomiast dla Euklidesoiuego indeksu 
tuektororuego z/ = 1, 2, 3, ... , tensor metryczny ma postac: 



{v. 



VfJ, J 



diag{l,l,l,.. 



(2.215) 



Zaiozenie o niezaleznosci p„ od Om dla m 7^ n: W rozujazaniach niniejszego skryptu zmienne Yn 
proby Y sq niezalezne (tzn. zakiadamy, ze pomiary dla m 7^ n sq uj probie niezalezne). Oznacza 
to rotuniez, ze ujartosc oczekiujana poiozenia 9^ = / dy P{y\Q)yni, nie ma ujpiyuju na rozkiad 
PniYnlOn) dla iudcksu proby m ^n. Wtedy dane sq generoujane zgodnie z punktoujymi rozkiadami 
speiniajqcymi ujarunek: 



Pn{yn\Q) = Pn{yn\On) , gdzie U 

a ujiarygodnosc proby jest iloczynem: 



l,...,N 



N 



P{y\Q) = \{pn{yn% 



(2.216) 



(2.217) 



n=l 
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Pojemnosc informacyjna kanaiu: Dla parametru poiozenia (czaso)przestrzennego, pojemnosc ka- 
naiu informacyjnego / dla ukladu, zdefinioujana ogolnie w (2.210), przyjmuje postac^^: 



N 



I=Y.lFn, (2.219) 

n=l 

gdzie 

Ipr. = lFn{0n) = J dyP{y\e) {VeJnP{y\e)-VeJnP{y\e)) 

^,/^={0),l,2,... ^ " " ^ 

Tensor (rj'^^) = diag{l, —1, —1, —1) jest tensorem dualnym do (??,/^), tzn. Yl'l.=oVufi'n'^'^ = ^2, przy 
czym 62 jest deltq Kroneckera, a Vg^ = = dy';[ . W zuji^zku (2.220) "•" oznacza iloczyn 

tueiun^trzny zdefinioiuany przez tensor metryczny {'q'^^). 



Uujaga o niefaktoryzoiralnosci czasoprzestrzennych indeksoir poiozenia: W pomiarze ujybra- 
nej z^-tej ujspoirz^dnej poiozenia nie mozna ujykluczyc odchylen (fluktuacji) ujartosci ujspoirz^dnych 
do niej ortogonalnych. Oznacza to, ze ujartosc oczekiujana z^-tej ujspoirz^dnej poiozenia nie jest u; 
(2.211) liczona z jakiegos rozkiadu typu p{y^), lecz musi bye liczona z iqcznego rozkiadu p{y) dla 
ujszystkich ujspoirz^dnych . W konsekujencji, ru przypadku zmiennych poiozenia przestrzennego 
i ich parametroiu naturalnych okreslonych w (2.211), caikoujanie w (2.220) nie moze zostac sfaktory- 
zoujane ze ujzgl^du na ujspoirz^dnq ujektoroujq u. 

Zgodnie z poruyzszq uujagq, luariancja estymatora 6n {y) parametru 6n poujinna przyjqc postac: 

{On) = j^dyP (y|e) (On {y) - On) ■ {y) - 9^) (2.221) 

dy p (y|e) (y) - ^n) {€ (y) - o^) • 

u, /x=(0),l,2,... 

Roztuazania przedstaiuione na koricu Rozdziaiu 2.3.2.2 oznaczajq, ze ze luzgl^du na (2.216), dla kazdego 
ujyroznionego parametru 0„ tuariancja cr^ jego estymatora (2.221) w jego kanale informacyjnym 
jest zujiqzana z informacjq Fishera Ipn = lFn{9n) parametru On poprzez nieroujnosc (2.139): 

^ <^< Ifu gdzie n = 1, 2, ...,N , (2.222) 

b^dqc^ uogolnieniem nieroujnosci informacyjnej Rao-Cramera (2.115), gdzie I"^ jest DORC dla para- 
meteru On- 




^^Lokalne lulasnosci funkcji miarygodnosci P(j/10) opisuje obsermoiuana macierz informacji Fishera: 

ktora pozostaje symetryczna i dodatnio okreslona. Jak luiemy (por. Rozdzial 2.2) jej martosc oczekimana na B zadaje geo- 
metrycznq struktur^ nazyiuanq metrykq Rao-Fishera na przestrzeni statystycznej S [6]. 
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Uluaga o zmiennych Fisher' oujskich: Faktu zaleznosci statystyczne] zmiennych poiozenia prze 
strzennego dla roznych indeksouj v nie nalezy mylic z posiadanq przez nie niezaleznosciq anali 
tycznq, ktora oznacza, ze zmienne Y tzm. zmiennymi Fisher' oujskimi, dla ktorych: 



■ (2.223) 



Ztciqzek pomi^dzy informacjq Stama i pojemnosciq /: Wielkosc ^ ^ - odnosi si^ do estymacji w 
n-tym kanale informacyjnym. Sumuj^c po indeksie n otrzymujemy informacj^ Stama Is [27, 8]: 

TV N 

0<^^-E-^-E^^"- (2.224) 

Ponieiuaz On = (On) jest parametrem tuektoroiuym, zatem Isn = 2 ]a J^^* informacjq Stama czaso- 
przestrzennych kanaiotu dla n-tego pomiaru in probie'^*'. 

W kohcu, sumujqc leruq i praiuq strong w (2.222) luzgl^dem indeksu n i bior^c pod uvuag^ (2.208), 
zauujazamy, ze Is speinia nieroujnosc: 

JV N 

0</s = 5^/Sn< J^/Fn = /, (2.225) 

n=l n=l 

gdzie / jest pojemnosciq kanaiu informacyjnego (2.219). Nieroujnosc (2.225) jest minimalnym uogol- 
nieniem "jednokanaloruej" nieroujnosci Rao-Cramer'a (2.222), potrzebnym z punktu luidzenia prze- 
proujadzanego pomiaru. 

Z punktu ujidzenia modeloiuania flzycznego, pojemnosc kanaiu informacyjnego / jest najujazniej- 
szym poj^ciem statystycznym, lezqcym u podstau; czionouj kinematycznych [8] roznych modeli teorii 
pola. Zgodnie z (2.208) okazaio si^, ze zaroujno dla metryki Euklidesoujej (2.215) jak i metryki Min- 
koujskiego (2.214), estymacja jest ujykonyujana dla dodatniej informacji Is- Zatem z (2.209) ujynika, ze 
/jest roujniez nieujemna. W Rozdziale 4.3.1 tuediug (4.21) okaze si^, ze / jest nieujemnie zdefiniotuana 
dla teorii pola dla czqstek, ktore majq nieujemny kiuadrat masy [30]. Chociaz u; kazdym szczegolnym 
modelu teorii pola z przestrzeniq Minkoiuskiego fakt ten pominien zostac spraiudzony, to z punktu 
ujidzenia teorii estymacji jest jasne, ze: 

{On) > . (2.226) 

Sytuacja ta ma zamsze miejsce dla procesow przyczynowych. 



Uujzgl^dnienie metryki Minkoiuskiego w deflnicji informacji Stama mozna zrozumic roujniez jako konsekinencj^ ogol- 
nego mskazania przy liczeniu sredniej kiuadratoiuej luielkosci mierzalnej in doiuolnej metryce Euklidesoiuej. W sytuacji 
gdy obok indeksom przestrzennych Xi, i — 1,2,3, myst^puje indeks czasoujy t, nalezy m rachunkach in czteroiuy- 
miaromej czasoprzestrzeni Euklidesomej umzgl^dnic me mspolrz^dnych przestrzennych jednostk^ urojonq i, Iqcznie z 
uwzgl^dnieniem tego faktu w prawie propagacji bl^dow. W zmiqzku z tym m oryginalnej anahzie EFI Friedena-Soffera, 
zmienna losoma czteromektora poiozenia oraz jej martosc oczekimana majq odpomiednio postac (Yb = cT,iY) oraz 
(^0 = cEq{T), 9 = iE{Y)), CO nie zmienia rezukatom anahzy zamartej m skrypcie, odnosz^cej si§ do romnah mecha- 
niki falomej oraz termodynamiki. Nie zmienia to romniez rezukatom anahzy relatymisycznej mechaniki kmantomej [29]. 
Jednakze opis mykorzystuj^cy metryk^ Minkomskiego mydaje si§ autoromi skryptu korzystniejszy z punktu midzenia zro- 
zimiienia konstrukcji niepodzielnego ekperymantalnie kanaiu informacyjnego (por. Umaga o indeksie proby). 



75 



Uluaga o indeksie proby i kanale pomiaroujym: Indeks proby n jest najmniejszym indeksem kanalu 
informacyjnego, uj ktorym dokonyiuany jest pomiar. Tzn. gdyby indeks proby mozna byio dodatkoujo 
"zaindeksotuac", np. indeksem czasoprzestrzennym, ujyznaczajqc podkanaiy, to i tak nie mozna by do- 
konac pomiaru tylko uj jednym z tak tuyznaczonych podkanaiou; (nie dokonujqc go roujnoczesnie u; 
pozostaiych podkanaiach posiadajqcych indeks proby n). Kanal niepodzielny z punktu wiedzenia 
eksperymentu nazwijmy kanalem pomiarowym. 

Uujaga o analizie lue fragmencie kanaiu pomiaroiuego: W przypadku ograniczenia analizy do frag- 
mentu kanaiu pomiaroiuego nalezy si^ upeujnic, czy pozostaia uj analizie cz^sc informacji Stama ma 
tuartosc dodatniq. Np. uj przypadku zaniedbania czasoujo zaindeksoujanej cz^sci czasoprzestrzennego 
kanaiu pomiaroujego, otrzymana nieroujnosc Stama dla skiadoujych przestrzennych ma postac: 

N 

0<ls = Y^^Sn 
n=l 

< E / P (?|e) E — ^ = (2.227, 

n=l 1=1 n=l 

gdzie znak ujektora oznacza, ze analiza zaroujno uj przestrzeni proby jak i przestrzeni parametrouj 
zostaia obci^ta do cz^sci przestrzennej zmiennych losoujych i parametrouj. 

Uujaga o symetrii: Z punktu ujidzenia pomiaru, biqd estymacji skiadoujych tuchodzqcych jedno- 
czesnie uj ujyznaczenie dtugosci czteroujektora uj n-tym kanale, jest niezalezny od ukiadu ujspoi- 
rz^dnych uj przestrzeni Minkoujskiego. Dlatego ujielkosc Isn = l/o"^ {9n) okreslona poprzez (2.224) 
oraz (2.221) jest dla tensora metrycznego (2.214) niezmiennicza ze ujzgl^du na transformacj^ Lorentz'a 
(pchni^cia i obroty). W przypadku tensora metrycznego (2.215) jest ona niezmiennicza ze ujzgl^du na 
transformacje Galileusza. 

Jesli chodzi o pojemnosc informacyjnq /, to uj przypadku niezaleznosci pomiarouj uj probie, jest ona 
roujniez niezmiennicza ze ujzgl^du na transformacje Lorentz'a uj przestrzeni z metrykq Minkoujskiego 
(czy transformacje Galileusza uj przestrzeni Euklidesoujej), o ile niezmiennicze jest kazde In-'^^ Wa- 
runki niezmienniczosci Isn oraz I schodzq si^, gdy uj nieroujnosci Rao-Cramera (2.222) osiqgana jest 
roujnosc. 

Nieroujnosc Rao-Cramera okazuje si^ niezmiennicza ze uizgl^du na podstaujouje transformacje [8, 
28]. Istotnie, zgodnie z poujyzszymi rozujazaniami, ujiasciujym pomiarem niezaleznym od przyj^tego 
ukiadu ujspoirz^dnych jest pomiar kujadratu diugosci ^^^g YuY'", a nie pojedynczej ujspoirz^dnej 
y^. Wi^cej na temat niezmienniczosci DORC ze ujzgl^du na przesuni^cie, odbicie przestrzenne, obroty 
i transformacje aflinicznq oraz transformacje unitarne mozna znalezc uj [28]. 

Kryterium minimalizacji / ze ujzgl^du na N: Na koniec zauujazmy, ze sumomanie uj (2.220) prze- 
biega od n = 1 do n = A^. Kazdy n-ty ujyraz uj sumie ujnosi analityczny ujkiad jako stopieri sujobody 

^'Pojemnosc informacyjna: 

In^ / dyP(y|e) ViF„J (2.228) 

jest niezmiennicza ze mzgl^du na gladkie odiuracalne odtuzoroujania Y — > X, gdzie X jest nouj^ zmienn^ [21]. Jest ona 
roujniez niezmiennicza ze ujzgl^du na odbicia przestrzenne i czasome. 
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dla /. O ile dodane stopnie siuobody nie ujpiyiuajq na juz istniejqce, to ponieiuaz kazdy, caiy tuyraz 
uj sumie po n jest nieujemny, to informacja / ma tendencje do ujzrostu luraz ze ujzrostem N. Kryte- 
rium minimalizacji / ze ujzgl^du na N posiuzyio Friedenotui i Sofferoiui jako dodatkotuy tuarunek 
przy konstrukcji np. rotunan mchu. Nie znaczy to, ze modele z uji^kszym N zostaiy automatycznie 
ujykluczone, tylko ze im tui^ksze jest N tym tui^cej stopni siuobody luchodzi do opisu obsertuotua- 
nego zjatuiska i opisymane zjatuisko jest bardziej ziozone. Zagadnienie to omotuimy u; przykladach, 
UJ dalszej cz^sci skryptu. 

2.8 Pomiar ukladu ui podejsciu Friedena-Soffera 

Jak UJ Rozdziale 2.7.1, rozujazmy zmiennq losoujq Y poiozenia ukiadu, przyjmujqcq ujartosc 
y, ktora jest punktem zbioru 3^. Moze to bye punkt czasoprzestrzenny przestrzeni Minkoujskiego, 
CO ma miejsce uj rozujazaniach zujiqzanych z opisem ukiadu np. uj mechanice faloujej. Wartosci 
y = {y'^)f,^Q £ y = M.^ s^. realizoujane zgodnie z rozkiadem p{y) ujiasciujym dla ukiadu''^. 

Podstaujouje zaiozenie fizyczne podejscia Friedena-Soffera: Niech dane y = (yn)^=i = (yi,--,y7v) 
sq realizacjami proby dla poiozen ukiadu, gdzie y„ = {'yn)t=o- Zgodnie z zalozeniem zaproponowa- 
nym przez Frieden'a i Soffer'a [8], ich zebranie nastqpuje przez sam uklad w zgodzie z rozkladami 
gfstosci prawdopodobienstwa, Pn{yn\(^n), gdzie n = 1, ...,N. 

Tresc poujyzszego zalozenia fizycznego mozna ujypoujiedziec nast^pujqco: Uklad probkuje dost^pnq 
mu czasoprzestrzen, "zbierajqc dane i dokonujqc analizy statystycznej", zgodnie z zasadami in- 
formacyjnymi (ujproujadzonymi uj Rozdziale 3). 

Przestrzenie statystyczne proby S, punktouja ^4 oraz S^xi '■ Niech rozujazana przestrzen jest cza- 
soprzestrzeniq Minkoujskiego. Wtedy kazdy z rozkladouj Pn{yn\(^n) jest punktem modelu statystycz- 
nego 54 = {Pn{yn\(^n)} parametryzoujauego przez naturalny parametr, tzn. przez ujartosc oczeki- 
ujanq 9n = {On)l=(j = E{Yn), jak uj (2.212). Zbior ujartosci d = 4 x N - ujymiaroujego parametru 
B = {On)n=i tujorzy ujspoirz^dne dla iqcznego rozkiadu P{y \ Q), b^dqcego punktem na (i = 4 x A^- 
ujymiaroujej rozmaitosci, ktora jest (pod)przestrzeniq statystycznq S C [6] (por. (2.34)): 

5 = {Pe = ^(y |e), G = {OX^i G T/e C 3f?'^} , (2.229) 

okreslonq na przestrzeni proby B. Jak ujiemy z Rozdziaiu 2.2, rozmaitosc S jest rodzinq rozkladouj 
praujdopodobienstuja parametryzoujanq przez rzeczyujistq, nie losoujq zmiennq ujektoroujq 6 = 
{(^n)n=i £ ktora UJ rozujazanym przypadku parametru poiozenia, tuJorzy N x 4-ujymiaroujy 
lokalny uklad ujspolrz^dnych. Zatem, ponieujaz proba y jest A'' x 4-ujymiaroujq zmiennq losoujq, 
uji^c ujymiary przestrzeni proby B i ujektoroujego parametru = {6^)!^^i sq takie same'^"^. 
W przyszlosci okaze si^, ze z poujodu zujiqzku (2.216) analiza na przestrzeni statystycznej okreslonej 
przez (2.229) z parametrami {0^)^^^ tujorzqcymi x 4-ujymiaroujy lokalny uklad xuspolrz^dnych, 
efektyujnie redukuje si^ do analizy na Snxa = {0^=iPn(y l^n)}- Jednakze, ponieiuaz ujartosci pa- 
rametru On mogq si^ zmieniac od jednego punktu n proby do innego punktu n', zatem nie moze bye 

^^Przy ujyproujadzaniu romnan generujqcych rozklad tu flzyce statystycznej y moze bye np. martosciq energii e ukiadu 
[8] i U3tedy y = e £y = n. 

Jednakze przypomnijmy, ze uj ogolnym przypadku estymacji, ujymiar uiektora parametrouj O = {6i)f^i oraz uiektora 
proby J/ = (y„)^^^i moze bye inny. 
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ona uj ogolnosci sproiuadzona do analizy na S poprzez samo przeskaloiuanie metryki Riemanna oraz 
(dualnej) koneksji na ^4 przez czynnik A^, jak to ma miejsce me tunioskoujaniu pojamiajqcym si^ uj sta- 
tystyce klasycznej [6]. W przysziosci liczb^ N parametrotu 9n, b^dqcq mymiarem proby y = (yn)^=i, 
b^dziemy nazymali rangq pola. 

Utuaga o podmiocie: Jednak pami^tajmy, ze estymacji dokonuje tyiko cziomiek, zatem na metod^ 
EFI nalezy patrzec tylko jak na pewien model analizy statystycznej. 

Interesujqca nas statystyczna procedura estymacyjna dotyczy mnioskomania o Pn(yn\dn) na pod- 
staujie danych y z mykorzystaniem funkcji miarygodnosci P{y\Q). Zaiozmy, ze dane zbierane przez 
uklad y = (yi,y2, •••,y7v) uzyskane niezaleznie tak, ze iqczny rozklad pramdopodobieristuja dla 
proby faktoryzuje si^ na rozkiady brzegome: 

TV N 

P(G) = P (y|e) = n (y^l®) = n (^"1^") ' (2.230) 

n=l n=l 

gdzie UJ ostatniej romnosci skorzystano z zatozenia, ze parametr 9m dla m ^ n nie ma mpiymu na 
rozkiad zmiennej Yn. 

Wst^pne okreslenie postaci kinematycznej /: Centralna cz^sc pracy Frieden'a i Soffer'a jest zmiqzana 
z przejsciem od pojemnosci informacyjnej / zadanej romnaniem (2.220) oraz (2.219): 

n=l n=l i/=0 II, / 

gdzie dy := d^yi...d^yAr oraz d^y^ = dy^dy^^dy'^dy^ , do tzm. postaci kinematycznej mykorzysty- 
manej m teorii pola oraz fizyce statystycznej. 

Rachunek analogiczny jaki dopromadzii z (2.183) do (2.186) myglgda teraz w skrocie nast^pujqco. 
Przeksztaicmy pochodnq In P m (2.231) do postaci: 

n=l n=l ^ ' ' 

Pami^tajqc o unormomaniu kazdego z rozkladom brzegomych, jy d'^y^ Pn (yn |^n) = 1. otrzymujemy 
postac pojemnosci informacyjnej: 

._V^/",4 1 4^ f dpn (yn I On) Opn (y« 1 9.) \ , . 

k-ly Pniyn\9n)^^[ 89... 89l )' ^'-'''^ 

b^dqcq uogolnieniem (2.186). 

W koncu przejdzmy do amplitud (ynl^n) okreslonych jak in (2.168): 

Pn{yn\9n)=qn(.yn\9n) ■ (2.234) 

Proste rachunki dajq: 

'-E//VE(^^)> (-35) 

n=l u=0 II / 



78 



czyli praujie kluczoujq postac pojemnosci informacyjnej dla rachunku metody EFI Friedena-Soffera. 
Jedyne co trzeba jeszcze zrobic, to przejsc od przestrzeni statystycznej S z bazq {6n)n=i dla repre- 
zentacji amplitud danych pomiaroujych y„ G y, do przestrzeni amplitud przesuni^c x„ := Yn — &n 
okreslonych na przestrzeni bazotuej X. Posuji^cimy temu zagadnienu Rozdziai 3.3. 



2.8.1 Przyklad: Estymacja uj fizycznych modelach eksponentialnych 

W Rozdziale 2.2.2 tuprotuadzone zostaio poj^cie dualnych afflnicznych ukiadouj ujspoirz^dnych 
na przestrzeni statystycznej S. Obecny rozdziai posuji^cony jest zastosoujaniu modeli eksponential- 
nych (2.61) i szczegolnej roli parametrow dualnych zujiqzanych z koneksjq V*^^^^. Rodzina modeli 
eksponentialnych ujykorzystyujana jest uj teorii estymacji szeregu zagadnieh fizycznych. Jej najbar- 
dziej znanq realizacjq jest estymacja metodq maksymalnej entropii, sformuiotuana uj ponizszym tujier- 
dzeniu dla ujymiaru proby = 1. 



Niech: 

Sh{p) = - [ dyp{y\E) lnp(y|H) , Vp= e 5 (2.236) 

Jy 

jest entropiq Shannona stanu ukiadu zadanego rozkiadem p(y|H) z parametrami E, a Fi{Y), i = 
1,2, ...,d, ukiadem niezaleznych zmiennych losoujych o okreslonych tuartosciach oczekituanych: 

9i = 9i{E) = E^[F,{Y)]= [ dyp{y\E)F,{y) , i = l,2,...,d , Vps £ 5 . (2.237) 

Jy 

Z (2.237) ujidac, ze Fi(Y) sq nieobciqionymi estymatorami parametrow 9i, tzn.: 

9, = Fi{Y), i = l,2,...,d. (2.238) 

Tirierdzenie o stanie z maksymainq entropiq (TME). Istnieje jednoznacznie okreslony unormotuany 
Stan ukiadu posiadajqcy maksymalnq entropi§, zadany nast^pujqco: 



PE^p{y\E) = Z-'exp^^eF^{y)^ , Vps 



s G 5 (2.239) 

UJ bazie kanonicznej E = (C)f=i modelu eksponentialnego (2.61), gdzie staia normalizacyjna Z jest 
tzw. funkcjq partycji (podziahi) [31]: 

Z^Z{E) = J^dyexp(j2eFi{y)j . (2.240) 

Doujod: Zgodnie z twierdzeniem Lagrange'a ujiemy, ze maksimum ujarunkouje dla funkcji Sh{p), 
przy dodatkoujym ujarunku normalizacyjnym: 

[ dyp{y\E) = 1 (2.241) 

Jy 

oraz d ujarunkach zujiqzanych z zadaniem ujartosci oczekiujanych (2.237), jest roiunoiuazne ujyzna- 
czeniu bezujarunkoujego ekstremum funkcji: 



dys^arip) := Sh{p) - ^° (l - _^ dyp{y\E)^ -J^cl^O,- dy p(y|H)F,(y) 

r ( d \ d 

dyp{y\E) ( - lnp(y|H) + C° + E CFi{y) \ " ^° " E ' (^.242) 
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ze ujzgl^du na ujariacj^ p(y|H), gdzie oraz czynnikami Lagrange'a. Ponieujaz Sh{p) jest 

scisle ujkl^sia [20], zatem otrzymujemy mahsimum, ktorejest wyznaczone jednoznacznie. 

Warunek ekstremizacji funkcjonaiu'^'^ S^arip) ze ujzgl^du na p{y\E), tzn. 6(^p-^Sujar = 0, protuadzi 
do rotunania Eulera-Lagrange'a: 

d I dSwar I dSuuar ryAo\ 

gdzie zgodnie z (2.242) postac funkcji podcaikotuej Syjar tuynosi: 

sn,ar = p(y|H) lnp(y|H) + ^° + E j ■ (2-244) 

Podstaujiajqc Swar do (2.243) otrzymujemy: 

d 

- lnp(y|H) + e° + E f i^*(y) - 1 = 0. (2.245) 

4 = 1 

Roujnanie (2.245) daje szukanq postac rozkiadu p(y|H) maksymalizujqcego entropi^ Sh{p)'- 



p{y\E) = Ae^^{^CFi{y)^ , gdzie A = 1/ exp{l - = const. 



(2.246) 



ktory jak to ujidac z (2.61) jest typu eksponentialnego z parametrami kanonicznymi i = 1,2, ...,d 
oraz C(y) = 0. Ponadto z marunku normalizacji (2.241) otrzymujemy A = Z^^, gdzie Z jest funkcjq 
party cji (2.240). c.n.d. 

Parametry dualne. Po rozpoznaniu, ze model maksymalizujqcy entropi^ stanu ukiadu jest modelem 
eksponentialnym (2.239) uj parametryzacji kanonicznej E, mozemy (2.239) zapisac uj postaci (2.61): 



PS = p(j\E) = exp 

gdzie 



^eF,(y)-V^(- 



.1=1 



, Vps G 5 , (2.247) 



= exp [iPiE)] . (2.248) 

Ponieiuaz zgodnie z (2.63), tlj{E) = In fy dy exp Yl'i=i ^^F'i{y) , zatem z (2.237) oraz ujykorzystujqc 
(2.247), otrzymujemy: 

Oi = d^,'il'{E) , i = l,2,...,d , VphG5, (2.249) 
gdzie skorzystano z oznaczenia d^i = d/d^^. 

Korzystajcjc z d^jd^, lnp(y|H) = -d^jd^.tl^iE), (2.66), oraz g^^- = -E^id^.d^j lnp(y|H)), (2.37), otrzy- 
mujemy roujniez: 

4 = %%V'(H), i,j = l,2,...,d , i,j = l,2,...,d , ypeS. (2.250) 



*Funkcjonai, m tym przypadku Swar{p), jest liczbq, ktorej luartosc zalezy od funkcji p(yjH) 
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Dualne ukiady modelu maksymalizujqcego entropi^: Z (2.64) ujiemy, ze ukiad ujspoirz^dnych 
{C)i=i jest a = 1 - afinicznym ukiadem ujspoirz^dnych modelu eksponentialnego. Zatem z (2.249) 
oraz (2.250) luynika, ze (^i)f=i jest a = (—1) - afinicznym ukiadem wspolrz^dnych modelu ekspo- 
nentialnego dualnym do {C)i=v 

Parametry 6i, i = 1,2,..., d, nazyiuamy z przyczyn podanych poujyzej parametrami dualnymi do 
(C*)f=i lub parametrami oczekiwanymi modelu statystycznego S. 



Estymacja na DORC: Korzystajqc z definicji (2.36) metryki Rao-Fishera, z postaci (2.247) rozkiadu 
eksponentialnego oraz z (2.249), otrzymujemy postac macierzy informacyjnej Ip w parametryzacji 
kanonicznej S: 

lF,,{E)^9f. = EE[d^AnpiY\E)d^,lnp{Y\E)] 

= Esm{Y)-ei){Fj{Y)-ej)] , i,j = 1,2,.. ., d, ypE(^s . (2.251) 

Niech = {0i)i^i sq estymatorami parametrotu = (^i)f=i bazy dualnej do H. Ponieujaz z (2.238) 
mamy 9i = FiiY), i = 1,2, d, zatem po praujej stronie (2.251) stojq elementy macierzy koujariancji 
Ve;(0) estymatoroiu 0: 

VE^J{e) = EE[{9i-e,){ej-e,)\ , i,j = i,2,...,d , yp^es. (2.252) 

Roujnosc (2.251) mozna uji^c zapisac nast^pujqco: 

VE{e) = lF{E), VphG5. (2.253) 

Ponieujaz macierze informacyjne uj bazach dualnych sq ujzgl^dem siebie odujrotne, tzn. = 
/^^(0), (2.97), oraz macierz kotuariancji okreslonych zmiennych losoxuych (u; tym przypadku 0) nie 
zalezy od bazy uj S: 

Ve{e) = VEiQ) , Vp G 5 , (2.254) 
uji^c z (2.253) otrzymujemy nast^pujqcy ziuiqzek: 

Ve{e) = Ip\e), VpoGcS. (2.255) 



Wniosek: Ze ujzgl^du na Tujierdzenie Rao-Cramera (2.142) poujyzszy tuarunek oznacza, ze estymacja 
parametrouj dualnych jest dla modeli eksponentialnych, speiniajqcych ujarunek maksymalnej entro- 
pii dokonyujana na DORC. 



Przyklad dualnego ukiadu ujspolrz^dnych. Rozklad normalny: Z Rozdziahi 2.2, ujzor (2.69), tuiemy, 
ze rozklad normalny jest typem modelu eksponentialnego z C(y) = 0. Oznacza to, ze moze si^ on po- 
jaujic jako rezultat estymacji speiniajqcej zaiozenia TME. Korzystajqc z postaci rozkiadu normalnego 
oraz z (2.237) i (2.69) otrzymujemy dualne parametry tego modelu: 

01 = ei{e,e) = l^dyp{y\E)y = -^=fi, 

02 ^ e2{e,e) = I dyp{y\E)y' = ^^^^^^ = f,^ + a' . (2.256) 
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Ponadto estymatory 9i = Fi(Y) = Y oraz 9i = Fi(Y) = Y"^ niezalezne. Spraujdzmy, ze zachodzi 
marunek konieczny ich niezaleznosci, a mianoujicie brak korelacji: 



71 - (71 j 



1 



dyp{y\E) (Fi(y)-0i)(F2(y)-02) 
= f dy (y - /i) [y^ - (/.^ + ^2)] 



(2.257) 



y 



dye (y - ^) [y _^]_(7 / (iye^^(y-/x) 



0, 



gdzie UJ drugiej linii skorzystano z postaci (1.16) rozkladu normalnego, a tu ostatniej z zeroujania si^ 
obu caiek z osobna. 



Wniosek: Z potuyzszych ogolnych roztuazari tunioskujemy uji^c, ze estymacja z tuieloparametrotuym 
rozkiadem normalnym speinia DORC. Poprzednio uj Rozdziale 2.1, uj myniku bezposredniego ra- 
chunku dla jednoparametroujej estymacji tuartosci oczekituanej /U, otrzymalismy w (2.18) ten sam 
ujynik. 

Jednakze dla rozkladu normalnego, m ktorym chcielibysmy dokonac jednoczesnej estymacji para- 
metrouj /x oraz a^, pojaujilby si^ problem z zastosoujaniem TRC ujynikajqcy z faktu, ze dla skonczo- 
nego ujymiaru proby N estymator a"^ jest obciqzony. Obecnie ujiemy, ze parametrami oczekiujanymi, 
ktorymi nalezy si^ posiuzyc aby zastosoujac TR i przekonac si^, ze model normalny speinia DORC 
sq fi oraz suma + cr^ (zamiast a^). Chociaz poiuyzszy rachunek zostal przeprotuadzony dla = 1, 
jednak ujniosek dla doxuolnego nie ulega zmianie. 



Przyklad dualnego ukladu ujspoirz^dnych. Rozkiad standardoujy eksponentialny: TME ma sujojq 
reprezentacj^ uj fizyce statystycznej. Otoz stan uj roujnoujadze termicznej, ktory maksymalizuje ter- 
modynamicznq entropi^ Boltzmanna Sb{p) ■= kB Sh{p), gdzie /c^ jest dodatniq staiq Boltzmanna, 
posiada przy ujarunku [E] = e naiozonym na ujartosc oczekiujanq (zmiennej losoujej) energii E 
czqstki gazu, rozkiad Boltzmanna: 

1 



Pm = ^e ■^'^bT , (2.258) 

gdzie e jest realizacjq E, a T jest (entropijnq) temperaturq (por. Dodatek 7.4). Rozkiad (2.258) jest 
standardoujym rozkiadem eksponentialnym z C(e) = 0, (2.71), dla ujymiaru proby = 1. Zgodnie 
z oznaczeniami ujproujadzonymi ui (2.71), jeden parametr kanoniczny ^, jedna funkcja 9^ = F{E) 
b^dqca estymatorem parametru oczekiujanego 9^ oraz potencjai ukiadu ujspoirz^dnych, majq 
postac: 

F{E) = E, e = --^, 9, = e, ^(e) = ln(-i) = lnZ. (2.259) 



Do rozkladu Boltzmanna poujrocimy uj Rozdziale 5.1.3, gdzie ujyproujadzimy go odujolujqc si^ do 
ujspomnianych uj Rozdziale 2.2.3 zasad informacyjnych. 
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Kolejne przykiady zastosomania estymacji eksponentialnej z bazq dualnq Q: Estymacja tego 
typu znajduje sujoje zastosoiuanie ujtedy, gdy mikrostan ukiadu jest po krotkim okresie czasu zastq- 
piony makrostanem, co oznacza estymacja stanu ukiadu poprzez peujien oszacoujujqcy stan otrzy- 
many metodq maksymalnej entropii na rozmaitosci modelu eksponentialnego (np. dla ujolno zmie- 
niajqcych si§) zmiennych makroskopoujych [21]. Przykladami realizacji tej procedury estymacyjnej sq: 

- Metoda analizy nielinioujej dynamiki Kossakoujskiego i Ingardena, ktorzy zrealizoujali poujyzszq 
procedure, dokonujqc ciqgiego rzutoujania mikrostanu ukiadu na iatujiejsze uj opisie makrostany 
ukiadu, lezqce na rozmaitosci stanouj eksponentialnycti. Z zaproponoujanej analizy statystycznej ujy- 
nikia mozliujosc realizacji nielinioxuej dynamiki ukiadu, opisanej jako konsekujencja optymalnej es- 
tymacji stanu ukiadu, pojaujiajqcego si^ po upiyujie kazdego kolejnego odst^pu czasu (uj ktorym 
dynamika ukiadu przebiegaia uj sposob linioujy), stanem lezqcym na rozmaitosci eksponentialnej 
[21]. 

- Model Onsagera realizujqcy tego typu estymacja uj badaniu zjaujiska przepiyujouj energii lub masy, 
UJ sytuacji, gdy sq one linioujymi funkcjami bodzcouj (peiniqcych rol^ parametroxu) ujyujoiujqcych 
taki przepiyuj. Teoria Onsagera ma zastosoujanie do zjaujisk majqcych charakter procesow quasista- 
tystycznych. Zatem stosuje si^ ona do sytuacji, gdy material, uj ktorym zachodzi zjaujisko jest uj lokal- 
nej roujnoujadze, tzn. zujiqzki zachodzqce lokalnie i uj tej samej chujili czasu pomi^dzy ujlasnosciami 
cieplnymi i mechanicznymi materiaiu sq takie same, jak dla jednorodnego ukiadu znajdujqcego si^ 
UJ roujnoujadze termodynamicznej. W ramach jego teorii sformuiotuano zasady ujariacyjne dla opisu 
linioujej termodynamiki procesouj nieodujracalnych. 

Podsumoujanie: Z poujyzszej analizy ujynika, ze metoda maksymalnej entropii dla nieobciqzonych 
estymatorouj 6i = Fi{Y), i = 1,2, ...d, ujykorzystuje a = (— 1) - piaskq baz^ G dualn^ do a = (+1) 

- piaskiej bazy kanonicznej H rozkiadu eksponentialnego z C(y) = 0. Ze ujzgl^du na piaskosc mo- 
delu eksponentialnego w bazie kanonicznej S, (2.64), macierz informacyjna Ip uj bazie dualnej jest 
odujrotna do Ip uj bazie E, skqd uj (2.255) przekonalismy si^, ze estymacja uj bazie koneksji affinicznej 
V(-i) przebiega na DORC. Oznacza to, ze rotuniez dla ujektoroujego parametru oczekituanego Q jego 
estymacja jest efektywna w klasie entropijnych modeli eksponentialnych. 

Jednak idqc dalej, dokiadniejsza niz to ujynika z TRC, modelowa estymacja, tzn. zujiqzana z konstruk- 
cjq nieobciqzonych estymatorouj parametrouj, nie jest mozliuja. 

O tym CO UJ kolejnej cz^sci skryptu: W kolejnej cz^sci skryptu zajmiemy si^ estymacjq zujiqzanq 
z zasadami informacyjnymi naiozonymi na tzw.fizycznq informacj^ ukiadu. 
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Rozdzial 3 

Zasady informacyjne 



3.1 Estymacja uj statystyce klasycznej a estymacja fizyczna. Postaiuienie pro- 
blemu 

W dotychczasoujej analizie przedstaujiona zostaia MNW uj statystyce. Polega ona na estymacji 
parametrouj peujnego zadanego rozkiadu. Na przykiad uj analizie regresji na podstaujie peujnej ujcze- 
sniejszej tuiedzy na temat zachoujania si§ zmiennej objasnianej, zakresu ujartosci jakie moze przyj- 
moujac oraz jej charakteru (ciqgia czy dyskretna) postulujemy ujarunkotuy rozklad i model regresji, a 
nast^pnie konstruujemy funkcj^ ujiarygodnosci, ktorq maksymalizujqc otrzymujemy estymatory pa- 
rametrouj strukturalnych modelu. Opracoujanie skutecznego algorytmu znajdoujania estymatorouj 
MNW oraz ich odchylen standardoujych jest centralnym problemem np. uj rutynoujych aplikacjach 
siuzqcych do analizy uogolnionych regresyjnych modeli linioujych. W analizie tej najujazniejszym ujy- 
korzystyujanym algorytmem jest ogolny algorytm metody iteracyjnie ujazonych najmniejszych kuja- 
dratouj, a jednq z jego gioxunych analitycznych procedur jest procedura Neujton-Raphson'a [13, 15]. 
Niech parametr ujektoroujy = {9n)n=i jest zbiorem ujartosci oczekiujanych zmiennej losoujej po- 
iozenia ukiadu uj N pomiarach, jak to przyj^lismy uj Rozdziale 2.7. Przypomnijmy uji^c, ze MNW jest 
ujtedy skoncentroujana na ukiadzie N roujnan ujiarygodnosci (1.8): 

5(G)|e=e = ^lnmie=e=0' 

ktorych rozujiqzanie daje N elementoujy zbior Q = {6n)n=i estymatorouj parametrouj. Tzn. uklad 
roujnan ujiarygodnosci tujorzy N ujarunkouj na estymatory parametrouj, ktore maksymalizujq ujia- 
rygodnosc probki. 

Estymacja uj fizyce musi si^ rozpoczqc na ujczesniejszym etapie. Wychodzqc od zasad informacyjnych, 
ktorym postui^cony b^dzie kolejny rozdziai, estymujemy odpoujiednie dla opisytuanego zagadnienia 
fizycznego roujnania ruchu, ktorych rozujiqzanie daje odpoujiedni rozkiad ujraz z parametrami. Tak 
uji^c zastosoujanie zasad informacyjnych naiozonych na funkcj^ ujiarygodnosci zamiast MNW sta- 
nouji o podstaujoujej roznicy pomi^dzy analizq statystycznq ujykorzystyujanq uj konstrukcji modeli 
fizycznych, a statystykq klasycznq. Oczyujiscie oznacza to, ze informacja Fishera zdefinioujana po- 
przednio na przestrzeni statystycznej S musi zostac zujiqzana z bazoujq przestrzeniq y przestrzeni 
proby, tak aby mozna jq ujykorzystac do konstrukcji roujnah ruchu. 
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3.1.1 Strukturalna zasada informacyjna. Metoda EFI 

Ponizsze roziuazania prezentujq analiz^, lezqcq u podstauj strukturalnej zasady informacyjnej [10]. 
Ta zas lezy u podstau; metody estymacji statystycznej EFI zaproponoiuanej przez Friedena i Soffera [8]. 
Niech Ve jest przestrzeniq parametru 6, tzn. G G Vq. Wtedy logarytm funkcji Luiarygodnosci InP : 
Ve — ^ R jest funkcjq okreslonq na przestrzeni Ve o ujartosciach uj zbiorze liczb rzeczyujistych R. 
Niech = {0n)n=i G Ve jest innq tuartosci^ parametru lub tuartosciq estymatora parametru 0. 
Roztuihmy uj punkcie funkcj^ lnP(0) uj szereg Taylora ujokoi praujdziujej ujartosci 0: 

P(0) _^ glnP(0) - 1^ dHnPje) ~ ~ 

n=l n,n'=l 

gdzie uzyto oznaczenia = 10=6' ^^^^ podobnie dla ujyzszych rz^dotu roztuini^cia, a i?3 

jest resztq rozujini^cia trzeciego rz^du. 



Znaczenie zasady obsertuoiuanej: Wszystkie cziony uj (3.1) sq statystykami na przestrzeni proby B, 
uji^c tak jak i ukiad roujnah ujiarygodnosci, roujnanie (3.1) jest okreslone na poziomie obserujouja- 
nym. Jest ono zqdaniem analitycznosci (logarytmu) funkcji ujiarygodnosci na przestrzeni statystycz- 
nej S, CO stanouji punkt ujyjscia dla konstrukcji obserujoujanej, rozniczkotuej, strukturalnej zasady 
informacyjnej (3.11), siusznej niezaleznie od ujyproujadzonej uj (3.12) postaci caikoujej. Postac obser- 
ujoujana ujraz z zasadq ujariacyjnq (3.41) jest, obok postaci oczekiujanej (3.12), podstaujq estymacji 
EFI roujnah ruchu teorii pola, lub roujnah generuj^cych rozkiad. 



Zdefiniujmy obserujoujanq struktur^ ukiadu tF uj nast^pujqcy sposob: 

Na poziomie obserujoujanym (nazyujanym czasami mikroskopoujym) mozemy rozujini^cie Taylora 
(3.1) zapisac nast^pujqco: 

^ dlnP ^ tF ^ 

Alms = XI ^ "5^^^" " " ^ ^ - = J]] 3F„„, {§„ - On) {On' - On') = Arms , (3.3) 

n=l " 71=1 n,n'=l 

gdzie iP jest znanq juz z (2.3)-(2.4) obserujotuan^ macierz^ informacyjn^ Fishera: 

ktora jako macierz odujrotna do macierzy koujariancji, jest symetryczna i dodatnio okreslona^ (Roz- 
dziai 2.1.1). Oznacza to, ze istnieje ortogonalna macierz U taka, ze Arhs ujyst^pujqce uj (3.3), a zatem 
roujniez Alhs< moze bye zapisane uj tzuj. postaci normalnej [32]: 

N N 

^LHS = ^ mnvl = X Wnn' {On " On){On' - On') = ^RHS , (3-5) 
n=l n,n'=l 



'Co oznacza, ze zakiadamy, ze funkcja In P jest luypukla uj otoczeniu praiudziirej luartosci parametru O. 
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gdzie Vn peujnymi funkcjami On, a m„ elementami dodatnio okreslonej macierzy nF (otrzyma- 
nymi dla Alhs), ktora z poujodu romnosci (3.5) musi bye roujna macierzy diagonalnej otrzymanej 
dla Arhs, tzn.: 

= D'^U'^ 2FU D . (3.6) 

Macierz D jest diagonalnq macierzq skalujqcq o elementach dn = yj^, gdzie A„ tuartosciami 
ujiasnymi macierzy iF. 



Ztuiqzek (3.6) mozna zapisac w postaci luaznego strukturalnego roiunania macierzoiuego b^dqcego 
bezposredniq konsekiuencjq analitycznosci logarytmu funkcji ruiarygodnosci na przestrzeni staty- 
stycznej S oraz postaci normalnej formy kujadratoiuej (3.5): 

cf + iF = , (3.7) 

gdzie 

(f = -U{D^)-^xFD-^U^ , (3.8) 
naziuijmy obserwowanq macierzq struktury. 



Dxua proste przypadki cf : Istniejq diua szczegolne przypadki, ktore protuadzq do prostych realiza- 
cji fizycznych. 

Piervuszy z nich zujiqzany jest z zaiozeniem, ze rozkiad jest reguralny [13]. Wtedy, zakladajqc dodat- 
konjo, ze dla vuszystkich n = 1, N zachodzi = 0, z roiunania (3.3) ujidzimy, ze: 

nF = (2 5„,„/), Vn=\l^ oraz dn = s/^/Xn . (3.9) 

Natomiast drugi przypadek zuji^zany jest z zaiozeniem, ze tF = i ujtedy z (3.3) otrzymuje si^ postac 
"roujnania master" (poroujnaj dalej (3.68)). W przypadku tym: 



nF = diag qq 1 . Vn = \jOn-Qn, tF = oraz dn = \^1-^l\n, (3.10) 
CO oznacza, ze nie istnieje ziozona struktura ukiadu. 



Obserujoujana strukturalna zasada informacyjna: Sumuj^c tuszystkie elementy zarotuno obserujo- 
luanej macierzy informacyjnej Fishera iF jak i obsertuoujanej macierzy struktury cf , roiunanie ma- 
cierzotue (3.7) proiuadzi do obserwowanej strukturalnej zasady informacyjnej Frieden'a: 

N N 

iiF)nn'+ Yl (^W=0. (3.11) 

n,n'=l n,n'=l 



Znaczenie analitycznosci P oraz postaci iF dla EFl: Analitycznosc funkcji tuiarygodnosci na prze- 
strzeni statystycznej S, ujyrazona istnieniem rozujini^cia uj szereg Taylora (3.1) oraz symetrycznosc 
i dodatnia okreslonosc obserujoujanej macierzy informacyjnej Fishera (3.4) sq zasadniczymi ujarun- 
kami, ktore czyniq analiz^ Friedena-Soffera uj ogole mozliujq. Okazuje si^ jednak, ze uj ogolnosci, dla 
otrzymania roujnah EFI nalezy odujoiac si^ dodatkoujo do ujproujadzonej ponizej calkoiuej zasady 
strukturalnej. 
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Caikoiua strukturalna zasada informacyjna: Caikujqc obie strony rotunania (3.11) po caiej prze- 
strzeni proby B (lub najej podprzestrzeni) z miarq dyP{Q), gdzie jak zujykle stosujemy oznaczenie 
dy = d^y, otrzymujemy caikoiuq postac informacyjnej zasady strukturalnej: 

Q + I = 0, (3.12) 

gdzie / jest uogolnieniem pojemnosci informacyjnej Fishera (2.210) (por. (2.31)): 

N 

1= / dyP{e) V {WU' , (3.13) 

n,n'=l 

natomiast Q jest informacjq strukturalnq (SI): 

r ^ 

Q= / dyPiQ) V (cf)„„, . (3.14) 

n,n'=l 

Pierujotnie, w innej, informatycznej formie i interpretacji, zasada (3.12) zostaia zapostulotuana uj [8]. 
Poujyzsza, lizyczna postac zasady strukturalnej (3.12) zostaia zapostulotuana uj [9], a nast^pnie tuypro- 
luadzona, jak to przedstatuiono poujyzej w [10]. 

Obserujoiuana zasada informacyjna (3.11) jest roujnaniem strukturalnym ujspoiczesnych modeli fi- 
zycznych ujyproujadzanych metodq EFI. Natomiast uzytecznosc oczekiujanej strukturalnej zasady in- 
formacyjnej (3.12) okaze si^ bye jasna przy, po pierujsze okresleniu zmodyfikoujanej obserujouianej 
zasady strukturalnej, po drugie, przy definicji caikoujitej fizycznej informacji (3.31) oraz po trzecie, 
przy sformuiouianiu informacyjnej zasady uiariacyjnej (3.41). Oczekiiuana zasada strukturalna jako 
taka, tzn. uj postaci caikoujej (3.12), nie jest rozujiqzyujana jednoczesnie z zasadq ujariacyjnq, co jest 
czasamijej przypisyujane. 



3.1.1.1 Caika rozmini^cia Taylora 

Scaikujmy (3.1) na na caiej przestrzeni proby B (lub najej podprzestrzeni) z miarq dy P{@). W 
ujyniku otrzymujemy peurnq caikouj^ form^ strukturalnego roiunania estymacji modeli: 

TV 



n=l 

TV 



^ jdyPiQ) ^ ^^^^ (On - en){en' " ^n') • (3.15) 



n,n'=l 



Wyrazenie po leujej stronie (3.15) ma postac zmodyfikoujanej entropii ujzgl^dnej. 
Nast^pnie, definujqc Q jako: 

Q = l^dy P{e) (^1F - J2 - On?j (3.16) 

otrzymujemy roumanie b^dqce caikoujq formq strukturalnej zasady informacyjnej: 

- a = / 4//!/P(e) E (-0£) - - . (3.17) 

n,n'=l 
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Uujaga: Roiunanie (3.17) jest ujtorne ujobec bardziej fundamentalnego roujnania strukturalnego (3.1 1) 
siusznego na poziomie obserujoiuanym, tzn. pod calkq. Chociaz rotunanie (3.17) nie jest bezposred- 
nio ujykorzystyujane w metodzie EFI, to jest ono stosoiuane do badania tuiasnosci nieobciqzonych 
estymatorouj 9 parametroiu [24]. Zagadnienie to ujykracza poza zakres skryptu. 

3.1.1.2 / oraz Q dia parami niezaleznych zmiennych poiozenioujych proby 

Rozujazmy jeszcze postac SI ujyrazonq uj amplitudach w szczegolnym przypadku zmiennych Yn 
parami niezaleznych. W takim przypadku amplituda g„ nie zalezy od dla n' ^ n, czyli ma postac 
Qniyn), natomiast (iF) jest diagonalna, tzn. ma postac: 

(iF)„„/ = (5„„'iF„„ = 3F.„ , (3.18) 

gdzie 5nn' jest deltq Kroneckera. W takim razie, zgodnie z (3.6) oraz (3.8) obserujoiuana macierz struk- 
turalna jest diagonalna i jej ogolna postac jest nast^pujqca: 



tzn. nie zalezy od amplitud q„/ (y„/ ) i jej pochodnych dla n' / n. Poujyzej g„ (y„) oznaczajq pochodne 
rz^du r = 1,2, ... . Zobaczymy, ze dla teorii pola uj cf „ pojaujiq si^ pochodne co najujyzej pierujszego 
rz^du. Fakt ten ujynika stqd, ze sujobodne pola rangi N, z ktorymi b^dziemy mieli do czynienia, h^dq 
speiniaiy roujnanie Kleina-Gordona. 

Uujaga: Oznaczenie cf jak rouiniez jauine zaznaczenie uj argumencie obserujoujanej SI tylko am- 
plitudy (?n(yn), b^dq stosoujane uj dalszej cz^sci skryptu. 

Wykorzystujqc (3.18) oraz (3.19), pojemnosc informacyjna (3.13) przyjmuje uj rozujazanym przypadku 
postac: 



nn' 



' = ^nn' Cf „,„ Qniyn): Qil' {Yu) = cf „ {qniYn)) 



(3.19) 




(3.20) 



natomiast informacja strukturalna (3.14) jest nast^pujqca: 




(3.21) 



Poujyzej i jest gfstosciq pojemnosci informacyjnej: 



N 




(3.22) 



n=l 



natomiast q jest g^stosciq informacji strukturalnej: 



N 




(3.23) 



n=l 
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Obserujoiuana zasada strukturalna zapisana lu g^stosciach: Zaroiuno i jak i q okreslone na po- 
ziomie obserujoujanym. Zatem korzystajqc z (3.18) oraz (3.19), mozemy obserwowanq informacyjnq 
zasad^ strukturalnq (3-11) zapisac uj postaci: 



Zasada ta, a raczej jej zmodyfikotuana tuersja, jest obok mariacyjnej zasady informacyjnej, ujykorzy- 
styujana uj celu otrzymania roujnan ruchu (bqdz rotunari generujqcych rozkiad) metody EFI. Zaroiuno 
zmodyfikoujana obserujoujana zasada strukturalna jak i zasada ujariacyjna sq okreslone ponizej. 

Uiuaga: W tresci skryptu g^stosc pojemnosci informacyjnej i jest zaujsze zujiqzana z postaci^ (3.4) 
obserujoujanej informacji Fishera iF. 

Na koniec zauujazmy, ze ze ujzgl^du na unormoujanie rozkiadouj brzegoujych J d'^yn Pniyn\dn) = 1> 
postac Q podanq uj (3.21) mozna zapisac nast^pujqco: 



n=l •' 

Wazna kinematyczna postac / zostanie ujproujadzona uj Rozdziale 3.3, natomiast postacie Q b^dq 
pojaujiaiy si^ uj toku rozujiqzyujania konkretnych fizycznych problemouj. 

3.2 Przeplyuj informacji 

Informacja Fishera Ip jest infinitezymalnym typem entropii Kulback-Leibler'a (Rozdziai 2.6.1) 
ujzor (2.201). W statystycznej estymacji KL siuzy jako narz^dzie analizy ujyboru modelu [23, 33], o 
czym mozemy si^ przekonac, zauujazajqc, ze jest ona zuji^zana z ujartosci^ oczekiujanq statystki ilo- 
razu ujiarygodnosci (1.58), ujproujadzonej uj Rozdziale 1.3.2, ujiasnie uj celu poroujnyujania ujiary- 
godnosci modeli. Chociazby z tego poujodu, pojaujia si^ przypuszczenie, ze pojemnosc informacyjna / 
moglaby, po nalozeniu, jak si^ okazuje strukturalnej i ujariacyjnej zasady informacyjnej [8, 9], stac si^ 
podstaujq roujnah ruchu (lub roujnah generujqcych rozkiad) ukiadu fizycznego. Roujnania te miaiyby 
bye najlepsze z punktu luidzenia zasad informacyjnych, co jest sednem metody EFI Friedena-Soffera. 

Zgodnie z Rozdziaiem 2.8, gloujna statystyczna mysl stojqca za metodq EFI jest nast^pujqca: prob- 
koujanie czasoprzestrzeni nast^puje przez sam uklad naujet ujtedy, gdy on sam nie jest poddany 
rzeczyujistemu pomiarouji. Sprauj^ nalezaioby rozumiec tak, ze uklad dokonuje probkoujania cza- 
soprzestrzeni uzyujajqc charakterystycznego, sujojego ujiasnego pola (i zujiqzanej z nim amplitudy) 
rangi A^, ktora jest luymiarem proby, probkujqc stuoimi kinematycznymi "Fisheroujskimi" stopniami 
sujobody przestrzeh poiozeh jemu dost^pnq. Przejscie od postaci statystycznej pojemnosci informa- 
cyjnej (2.220) do jej reprezentacji kinematycznej zostanie omoujione ponizej uj Rozdziale 3.3. 

Rozujazmy nast^pujqcy, informacyjny schemat ukiadu. Zanim nast^pi pomiar, ktorego dokonuje sam 
uklad, ma on pojemnosc informacyjnq I zaujartq uj siuoich kinematycznych stopniach sujobody oraz 
informacji strukturalnq Q ukiadu zaujartq uj sujoich strukturalnych stopniach siuobody, jak to przed- 
staujiono symbolicznie na ponizszym Rysunku. 



i+q=0 . 



(3.24) 




(3.25) 
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Rysunek 3.1: Panel: (a) Ukiad przed pomiarem : Q jest SI ukiadu zaiuart^ w strukturalnych stopniach 
siuobody, a / jest pojemnosciq informacyjnq ukiadu zaujartq uj kinematycznych stopniach sujobody. 
(b) Ukiad po pomiarze: Q' jest SI, a /' jest pojemnosciq informacyjnq ukiadu po pomiarze. Ponieujaz 
transfer informacji (TI) w pomiarze przebiega z J > zatem 6Q = Q' — Q < oraz 61 = I' — I > 0. 
W pomiarze idealnym 61 = —6Q. 



"W chujili ujiqczenia" pomiaru, podczas ktorego transfer informacji (TI) przebiega zgodnie z nast^- 
pujqcymi zasadami (Rysunek 3.1): 

J > , zatem 5/ = /'-/> , 6Q = Q' - Q < , (3.26) 

gdzie Q' sq odpotuiednio IF oraz SI ukiadu po pomiarze, natomiast J jest dokonanym transferem 
informacji (TI). 

Postulujemy, ze uj pomiarze TI "w punkcie q" jest idealny, co oznacza, ze: 

Q = Q' + J = Q + SQ + J, zatem 6Q = -J . (3.27) 
Oznacza to, ze "uj punkcie q" przekazana jest caia zmiana SI. 

Z drugiej strony "uj punkcie i" zasada zujiqzana z T/ jest nast^pujqca: 

I' <I + J zatem < 61 = I' - I < J . (3.28) 
Dlatego 

poniewaz J > , zatem \6I\ < \6Q\ , (3.29) 

CO jest rozsqdnym resultatem, gdyz uj pomiarze moze nastqpic utrata informacji. Gdyby "uj punkcie 
i" TI byi idealny, ujtedy caiy pomiar byiby idealny, tzn.: 

6Q = —61 pomiar idealny . (3.30) 

W [9, 16] zostaio zapostulomane istnienie nieujemnej addytyujnej caikomitej (totalnej) fizycznej infor- 
macji (TFI): 

K = I + Q>0 . (3.31) 

Wybor intuicyjnego marunku A' > [16] jest zujiqzany ze strukturalnq zasadq informacyjnq zapi- 
san^ UJ postaci obserujoujanej: 

N N 

n,n'=l n,n'=l 

lub oczekiujanej: 

I + kQ = 0. (3.33) 
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Dla szczegolnego przypadku k = 1, uj Rozdziale 3.1.1 zostala tuyproiuadzona [lOjpostac obsertuoiuana 
zasady strukturalnej (3.11): 

N N 

(3F)„„, + (^)nn' = dla K = l, (3.34) 

n,n'=l n,n'=l 

oraz jej oczekixuany odpoiuiednik (3.12): 

/ + Q = dla K = l . (3.35) 

Wspoiczynnik k zostai naziuany w [8] tuspoiczynnikiem efektymnosci. W praktyce przyjmuje on dujie 
mozliuje ujartosci [8]: 

K = l V ^ . (3.36) 

Jego znaczenie zostanie omoiuione w Rozdziale 4. W przypadku okreslonym uj (3.35), otrzymujemy 
caikoujitq fizycznq informacj^ K roiun^: 

K = I + Q = dla K = l . (3.37) 

W koricu zauujazmy, ze uj zgodzie z zapostuloiuanym zachoujaniem si§ ukiadu uj pomiarze, otrzyma- 
lismy z ujarunkouj (3.27) i (3.28) nieroujnosc 61 < J = —6Q, z czego ujynika, ze: 

K' = I' + Q' < {I + J) + {Q - J) = I + Q = K =^ K' <K . (3.38) 

Dla pomiaru idealnego (3.30) otrzymalismy 61 = —6Q skqd K' = K, co oznacza, ze informacja 
fizyczna TFI pozostaje uj tym przypadku niezmieniona. Jesli pomiar idealny byiby ujykonany na 
poziomie probkoujania czasoprzestrzeni przez sam ukiad, ujtedy ujarunek ten moglby proujadzic do 
ujariacyjnej zasady informacyjnej (3.41), tzn.: 

61 = -6Q =^ 6{I + Q) = 0. (3.39) 

Chociaz rozumoujanie poujyzsze ujydaje si^ bye rozsqdne, jednak scisle moujiqc siusznosc przyj^cia 
zasad informacyjnych, strukturalnej oraz ujariacyjnej, poujinno ujynikac z dujoch rzeczy. Po pierujsze 
z ich ujyproujadzenia, a po drugie z ich uzytecznosci. Wyproujadzenie zasady strukturalnej (dla k = 1) 
zostaio pokazane uj Rozdziale 3.1.1. 

Natomiast poujyzsze ujnioskoujanie, ktore doproujadziio do ujarunku (3.39) oraz sama implikacja rue- 
ujnqtrz niego, moze siuzyc jedynie jako przesianka siusznosci zasady ujariacyjnej. W Rozdziale 2.2.3 
stujierdzilismy, ze jej siusznosc ujynika z zqdania aby rozkiad empiryczny oraz rozkiad ujyestymo- 
ujany metodq EFI, lezaiy na ujspolnej geodezyjnej uj przestrzeni statystycznej S. 
Co do uzytecznosci zasady ujariacyjnej uj metodzie EFI, to jest ona oczyujista, boujiem proujadzi ona 
do oujocnego uj zastosotuaniach rotunania Eulera-Lagrange'a. 

Analityczny przypadek ukiadu roujnari informacyjnych melody EFI: Obserwowana zasada struk- 
turalna zapisana uj g^stosciach (3.24), ale uujzgl^dniajqca postac obserujoujanej zasady strukturalnej 
z K (3.32), jest nast^pujgca: 

i + Kq = 0. (3.40) 

Drugq zasadq informacyjnq jest zasada wariacyjna (skalarna). Ma ona postac [9]: 

6K = 6{I + Q) = =^ K = I + Q jest ekstremalne . (3.41) 
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Warunek geometrycznej struktury na S: Kolejnym ujarunkiem narzuconym na roziuiqzania metody 
EFI, a oczytuistym od poczqtku analizy, jest ujarunek normalizacji i reguralnosci rozkiadu praiudo- 
podobienstuja. Warunek ten oznacza mozliujosc przejscia, podanego uj (2.31) i (2.36), od pierujotnej 
postaci obserujoujanej informacji Fishera (3.4) do postaci potrzebnej dla zdefinioujania przestrzeni 
statystycznej S jako przestrzeni metrycznej z metrykq Rao-Fishera (2.37) i a-koneksjq (2.52) (por. Roz- 
dziai 2.2). Obie postacie obserujoujanej informacji Fishera, pierujsza iF, (3.4), ktora jest pierujotnq 
formq z punktu ujidzenia analitycznosci funkcji ujiarygodnosci oraz druga, metryczna iF, (2.5), ktora 
jest istotna dla geometrycznej analizy modelu, sq roujnoiuazne tylko na poziomie oczekituanym, tzn. 
pod caikq (por. Rozdziai 2.31). Poiuyzsze rozujazania zostanq zilustroujane przykiadami zaujartymi uj 
dalszej cz^sci skryptu. 



Podstaujoujy ukiad roujnan informacyjnych EFI i zmodyfikoujane rouinanie strukturalne: Aby 

ujyjasnic poujyzszy problem na ujst^pnym, symbolicznym poziomie, ujproujadzmy zmodyfikoujane 
roxunanie strukturalne, uujzgl^dniajqce roujniez ujspoiczynnik k ujyst^pujqcy uj (3.40). Niech iF jest 
kujadratouj^ postaci^ obserujoujanej informacji Fishera (2.5) tak, ze odpoiuiadaj^ca jej g^stosc pojem- 
nosci informacyjnej: 

N 

T:=P(e) Wnn' , (3.42) 

n,n'=l 

daje na poziomie oczekiujanym pojemnosc informacyjnq / = Jgdy i = J^dy i ■ 

Wproujadzmy zamiast (3.40) zmodyfikowanq obserwowanq zasad^ strukturalnq zapisanq uj nast^- 

pujqcy sposob: 

i+C + K,q = 0, przy czym /= dyi= dy {V + C) , (3.43) 

Jb Jb 

gdzie C jest pochodnq zupelnq, ktora ujynika z calkoujania przez cz^sci calki / = Jgdy i. Ponieujaz 
/ = j^dyi zatem informacyjna zasada ujariacyjna ma postac: 

6{I + Q) = 6 [ dyCi + q) = . (3.44) 
Jb 

Rozujiqzanie roujnah (3.43) oraz (3.44) jest romnoujazne rozujiqzaniu roujnah (3.40) oraz (3.41) co naj- 
mniej pod caikq, tzn.: 



dy{i'+C + Kq) = <^ dy{i + Kq) = 0. (3.45) 
B Jb 

Poujyzszq symbolicznq konstrukcj^ (3.43) zaprezentujemy na przykiadach uj dalszej cz^sci skryptu 
(Rozdziai 5). Jej zrozumienie jest nast^pujqce: Modele „nie do kohca rorunoiuazne" pod tuzgl^dem ana- 
litycznym sq, z dokiadnosciq do ujycaikoujania / przez cz^sci, roujnoujazne pod ujzgl^dem metrycz- 
nym. To znaczy, istnieje peujien zujiqzek pomi^dzy ich rozniczkoujalnosciq, a mianoujicie ujszystkie 
one sq metrycznie (a uji^c na poziomie calkoujym) roujnoujazne modelouji analitycznemu, tzn. posia- 
dajqcemu rozujini^cie uj szereg Taylora. 



Podsumoujanie. Nalezy podkreslic, ze rotunanie caikotue (3.37) oraz zasada ujariacyjna (3.41) nie 
tujorz^ pary roujnah metody EFI rozujiqzyujanych samospojnie. 
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Natomiast obie zasady, obseriuoujana zmodyfikoiuana zasada strukturalna (3.43) oraz zasada luaria- 
cyjna (3.44) podstaiuq metody estymacyjnej EFI. Tujorzq one ukiad dtuoch roujnan rozniczkotuych 
dla ujproujadzonych w Rozdziale 2.5 amplitud ukiadu (2.168). Uklad ten moze bye zgodny, dajqc sa- 
mospojne roztuiqzanie dla amplitud [8] i protuadzqc przy k = 1 lub 1/2 do dobrze znanych modeli 
teorii pola (Rozdziai 4) lub modeli fizyki statystycznej (Rozdziai 5). Ponadto, strukturalna (ujeujn^trzna) 
zasada informacyjna (3.33) [9] jest operacyjnie roujnoujazna zapostuloujanej przez Frieden'a [8], uji^c 
jako ujyproujadzona poujinna miec przynajmniej takq samq moc przeujidyujania jak i ona. Wiele z 
podstaujoujych modeli zostaio juz ujyliczonych [8], jednak ich ponoujne przeliczenie [16] przy poujy- 
zej podanej interpretacji informacji fizycznej K moze dac lepsze zrozumienie samej metody EFI i jej 
zujiqzku z istniejqcym juz modeloiuaniem zjatuisk u; fizyce oraz jej ograniczen. 

Zasada ekujipartycji entropii ujzgl^dnej: W koncu, uj strukturalnej zasadzie informacyjnej ciekauje 
jest roujniez to, ze stanouji ona ujarunek zeroujego podziaiu dla TFI, ktory jest daujno poszukiuja- 
nym ujarunkiem zasady ekujipartycji entropii (uj tym przypadku infinitezymalnej entropii ujzgl^dnej). 

Uujaga o podejsciu Friedena: Wspomnielismy o tym, ze pomysl metody EFI pochodzi od Friedena. 
Jednak moujiqc uj skrocie, Frieden i Soffer [8] podeszli inaczej do informacji strukturalnej. W [8] ujpro- 
ujadzono tzuj. informacji zujiqzanq J, ktora ma interpretacji informacji zaujartej uj ukiadzie przed 
pomiarem. Chociaz, aksjomaty Frieden'a sq roujnoujazne poujyzszym ujarunkom (3.33) oraz (3.41), o 
ile J = —Q, to jednakze roznica pomi^dzy podejsciami jest ujidoczna. A mianoujicie, o ile uj podejsciu 
Friedena-Soffera uklad dosiuiadcza transferu informacji J — /, majqc uj kazdej chujili czasu tylko 
jeden z tych typouj informacji, o tyle uj naszym podejsciu system jest charakteryzotuany jednoczesnie 
przez / oraz Q uj kazdej chujili czasu. 

Utuaga o podobienstujie EFI i teorii Jaynes'a: Metoda EFI zaproponoujana przez Friedena i Soffera 
[8] jest konsekujencj^ postulatu podobnego do zasady Jaynes'a^. Mianoiuicie podobieiistujo obu teorii 
lezy UJ tym, ze poprzez zasady ujariacyjnq ujiqzq one strukturalne (Boltzmann'oujskie) stopnie sujo- 
body z kinematycznymi (Shannona) stopniami sujobody'^. 

Wediug podejscia Jaynes'a, maksymalizacja entropii Shannona ujzgl^dem praujdopodobiehstuj mikro- 
stanu ukiadu, posiadajqcego znane ujlasnosci, np. ustalonq energi^, umozliujia identyfikacj^ termo- 
dynamicznej entropii Boltzmanna jako zmaksymalizoujanej entropii Shannona, a nast^pnie na kon- 
strukcji funkcji stanu, np. energii sujobodnej. 

3.3 Kinetyczna postac informacji Fishera 

Centralna cz^sc pracy Frieden'a i Soffer'a zujiqzana jest z transformacjq postaci pojemnosci infor- 
macyjnej / zadanej roujnaniem (2.220) oraz (2.219) do tzuj. postaci kinematycznej ujykorzystyujanej 
UJ teorii pola oraz fizyce statystycznej. W obecnym rozdziale zaprezentujemy podstaujouje zaiozenia, 
ktore doproujadziiy do konstrukcji kinematycznego czionu (caiki) dziaiania dla czteroujymiaroujych 
modeh teorii pola. Przejscie to ma nast^pujqcq postac [8]. 

^E. Jaynes, Information Theory and Statistical Mechanics, Phys.Rev. 106, 620-630 (1957). E. Jaynes, Information Theory 
and Statistical Mechanics. II, Phys.Rev. 108, 171-190 (1957). 

^Metod tych nie nalezy jednak utozsamiac. Nalezy pami^tac, ze macierz informacyjna Eishera, ruykorzystymana m EEI, 
oraz entropia Shannona, ruykorzystyiuana ui podejsciu Jaynes'a, roznymi poj^ciami. Macierz informacyjna Fishera jest 
Hessianem (2.171) entropii Shannona. 
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Zgodnie z podstaiuoiuym zaiozeniem Friedena-Soffera, A^-ujymiaroiua probka y„ = (yj^) jest po- 
bierana przez ukiad posiadajqcy rozkiad PniYn), gdzie obok indeksu proby n = 1,2, ...,N lupro- 
tuadzono indeks (czaso)przestrzenny u = (0),1,2,3. Zgodnie z Rozdziaiem 2.5, luzor (2.168), me- 
tryka Fishera na (pod)rozmaitosci S proiuadzi w naturalny sposob do poj^cia rzeczyiuistej amplitudy 
Q{yn\On) = \/p(yn|^n) pola ukladu. Od razu skorzystano tez z zapisu, ktory sugeruje niezaleznosc 
rozkiadu dia Yn od 6^, gdy m ^ n. 

Jak przedstatuilismy w Rozdziale 2.8 pojemnosc informacyjna (2.231) moze zostac zapisana jako (2.235): 

3 

,.„e).4E//y,.E(»^»^)^ (3-) 

n=l i/=0 II / 



Addytyirny rozkiad polozen i reguia iancuchoira: Niech x„ = (xj^) przesuni^ciami (np. ad- 
dytyujnymi fluktuacjami) danych y.„ = (yj^) od ich ujartosci oczekiiuanych tzn.: 



yn = C + x^ (3.47) 



Przesuni^cia xj^ zmiennymi Fisher' oiuskimi, speiniajqc luarunek fe- = (5j^, (2.223). 



Odiuoiujqc si^ do "reguiy iaricuchomej" dla pochodnej: 



QK de-^ 5(y--^-) 5(y--0-) 5x- 



(3.48) 



oraz uujzgl^dniajqc d^x„ = d^yn, co ruynika z tego, ze parametry On sq stalymi, mozemy przejsc od 
postaci statystycznej (3.46) do postaci kinematycznej IF : 



(3.49) 



gdzie d'^Xn = (ix° dx^dx^ tix^. W (3.49) ujproujadzono oznaczenie: 

qn{Xn) = Qni^n + 0n\dn) = qn{yn\On) , (3.50) 

pozostawiajqc calq informacj§ o 9n w indeksie n amplitudy qn{^n)- 

Kinematyczna postac IF dla Zakiadajqc, ze zakres zmiennosci luszystkich xj^ jest dla kazdego 
n taki sam, mozemy pominqc indeks n przy tej zmiennej (ale nie przy amplitudzie qn), otrzymujqc 
postac: 



N 



9g„(x) 5g'„(x) 



/ = 4y /d^xV^^^^, (3.51) 



ktor^ ujykorzystamy przy ujyproiuadzeniu roiunah generuj^cych lizyki statystycznej [8], ale ktora zo- 
stala roujniez inykorzystana do ujyproujadzenia elektrodynamiki Maxiuella metodq EFI [8]. 



Uujaga: Wymiar proby N jest rangq pola ukladu zdefiniowanego jako zbior amplitud {qn{^n))n=i 
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W Rozdziale 3.1.1 pokazalismy, ze strukturalna zasada informacyjna I + Q = jest artefaktem istnie- 
nia rozxuini^cia In P(9) w szereg Taylora"^ ujokoi praujdziujej tuartosci parametru 6. Obecnie znamy 
juz ogoinq postac kinematycznq I cz^sci pomiarotuej zasady strukturalnej. W metodzie EFI, jej cz^sc 
strukturalna Q ma postac zaleznq od np. fizycznych uji^zou; naiozonych na ukiad. Zagadnieniem tym 
zajmiemy si^ u; kolejnych Rozdziaiach 4 oraz 5. 



Amplitudy zespolone: Kolejnym zaiozeniem jest konstrukcja skladowych funkcji falowej skiada- 
nych z amplitud^ u; nast^pujqcy sposob [8]: 

V'n(x2n-l,X2n) = (g2n-l(x2n-l) + «g2n(x2n)) , n = 1, 7V/2 . (3.52) 

V N 



Poujyzsza postac jest uogolnieniem konstrukcji Friedena, ktory ttuorzqc funkcj^ faloujq ukiadu ziozyi 
n-tq skladowq funkcji falowej z amplitud uj nast^pujqcy sposob [8]: 

V'nlx) = ^((?2n-l(x)+«(72n(x)) , n = l,...,N/2. (3.53) 

V N 



Dokladniej moujiqc, aby posiuzenie si^ funkcjq faloujq (3.53) miaio sens, musi przynajmniej pod calkq 
zachodzic roujnoujaznosc zmiennych: 

x,„ = X dla wszystkich n = 1, 2, . (3.54) 

Zaiozenie to caikiem ujystarcza przy liczeniu tuartosci oczekiujanych oraz praujdopodobienstuj. 
Przy zaiozeniu postaci (3.53) dla 77,-tej skiadoujej^, postac funkcji falowej Friedena jest nast^pujqca: 

V^(x) = (^„(x))^Z2i . (3.55) 

Zbior N/2 skiadoujych funkcji falouiych nazwijmy funkcjq falowq ukiadu rangi N. 
Zauujazmy, ze zachodzq nast^pujqce roujnosci: 

N N/2 

Y.1n = ill + 4 + - + Q%-i) + {4 + + - + Q%)=Y1 (92n-l)' + {q2nf (3.56) 

n=l n=l 

i analogicznie: 

d^nu dK ^1 V d^nu 3X- ax„, d^- J ' ' 

Zakladajqc dla wsz^^stkich ponizszych rozwazan slusznosc (3.54), przynajmniej pod calkq, oraz 
postac funkcji falowych (3.53), dokonajmy nast^pujqcego ciqgu przeksztaicen dla (3.51): 



n=l V 71=1 



X 



dq2n-\ dq2n-l ^ dq2n dq2n 

9xj^ dx.'^ dyiy (?x^ 



4A^y^ f d'^xY^ 1 d {q2n-l - iq2n) 1 ^(g2n^l + ^g2n) 

^-^Jx ^^VN 9x^ ^ 9x 



(3.58) 



''W [10] byia uzyta miara d^xP{Q) zamiast d^y P(0). Nie zmienia to jednak domodu strukturalnej zasady informa- 
cyjnej, lecz poszerza jego zastosoujanie na sytuacje, ktore nie posiadajq niezmienniczosci przesuni^cia, zalozenia nie 
uiykorzystyiuano u) douiodzie. 

^Amplitudy q„ sq w przypadku rozkiadoiu ci^glych zini^zane z p„, ktore sq g^stosciami praujdopodobienstuj. 

*0 ile nie b^dzie to proujadziio do nieporozumieii, b^dziemy pominijali sioiuo "skladoiua". 
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gdzie uj ostatnim przejsciu skorzystano z przeksztaicenia typu: 

<in-i qL-1 + qL qL = {qL-1 - i <in){(in-i + ^ qL) , (3-59) 
z indeksem k oznaczajqcym pochodnq rz^du k = 0,1, ... . 

Kinematyczna postac IF dla Odiuohij^c si^ do definicji (3.53) funkcji falotuej, otrzymujemy: 

N/2 



n=l •'■^ 



Pojemnosc informacyjna (3.60) ma typoujq postac np. dla relatyujistycznej mechaniki faloujej, odpo- 
ujiadajqcq cz^sci kinetycznej caiki dziaiania. Dlatego ujiasnie oczekiujanq informacj^ Fishera nazujai 
Frieden informacjq hinetycznq. W [8] uzyto jej do luyproiuadzenia roxunan Kleina-Gordona oraz Di- 
raca metodq EFI [8]. 

Rozkiadu prairdopodobieristuja przesuni^cia uj ukiadzie: Korzystajqc z tujierdzenia o pratudopo- 
dobienstvuie caikoiuitym, ggstosc rozkiadu praujdopodobienstuja przesuni^cia (lub fluktuacji) uj ukia- 
dzie moze bye zapisana nast^pujqco [8]: 

N N ^ N 

= ^p(x|6l„)r(6'„) = (x„|6'n)r(6l„) = — ^,j^(xn|6'n) 

n=l n=l n=l 



1 ^ 
n=l 

gdzie skorzystano z zaiozenia, ze n-ta luartosc oczekiujana 0„ nie ma dla m ^ n ujpiyuju na roz- 
kiad przesuni^cia x^ oraz jak zujykle z postaci amplitudy = pn- Praujdopodobienstujo pn jest 
praujdopodobienstujem pojaujienia si^ ujartosci x„ zmiennej losoujej przesuni^cia (lub fluktuacji) z 
rozkiadu generoujanego z parametrem On, tzn. ma ono interpretacj^ praujdopodobienstuja ujarun- 
koujego Pn (x„|0„). Funkcj^ r {On) = jf mozna naziuac funkcjq "nieujiedzy", gdyz jej postac jest 
odzujierciedleniem caikoujitego braku tuiedzy odnosnie tego, ktora z N mozliujych ujartosci On po- 
jauji si^ UJ konkretnym n-tym z N eksperymentouj proby. 

Postac rozkiadu dla tp: W koncu, korzystajqc z (3.53), (3.57), (3.59) oraz (3.61) ujidac, ze: 

N/2 

p(x) = 5]C(x)^n(x) (3.62) 

n=l 

jest g^stosciq rozkiadu praujdopodobienstuja przesuni^cia (lub fluktuacji) x uj ukiadzie opisanym 
funkcjq faloujq (3.55). 



Uujaga o roznicy z podejsciem Friedena: W caiym poujyzszym ujyproujadzeniu nie uzylismy pod- 
staujoujego zaiozenia Friedena-Sofi^era o niezmienniczosci rozktadu ze wzgl§du na przesuni^cie, 
tzn.: 

p„(x„) = Px,S^n\dn) = Pn{yn\0n) , gdzie :X.n = Yn - ^ (3-63) 

gdzie Yn = [Yn)' Xn = (xj^) oraz 0„ = (On). Zaiozenie to nie jest potrzebne przy ujyproujadzeniu 
postaci (3.49) pojemnosci informacyjnej. 
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Uluaga: Co tui^cej, informacja o On musi pozostac w rozktadzie pn orazjego amplitudzie qn- Wcze- 
sniej umowilismy si^, ze indehs n zawiera tq informacj§. Po umiejscoiuieniu informacji o On w 
indeksie n mozna, uj razie potrzeby ujynikaj^cej np. z fizyki zjamiska, zazqdac dodatkoujo niezmien- 
niczosci ze ujzgl^du na przesuni^cie. 

3.3.1 Postac kinematyczna pojemnosci zapisana u; praiudopodobiehstujie 

Ponizej podamy postac kinematycznq pojemnosci zapisanq u; (punktoujych) praiudopodobien- 
stujach proby. Postac ta jest bardziej pierujotna niz (3.46), chociaz uj tresci skryptu luykorzystyujana 
jedynie uj Dodatku. 



Puntem ujyjscia jest pojemnosc (2.233): 



dpn {yn\On) dpn (Ynl^'n) 
dOnu 00- 



Korzystajqc z przejscia do addytyujnych przesuni^c x„ = (xj^) ,(3.47), oraz z "reguly lancuchotuej" 
(3.48) dla pochodnej, otrzymujemy (podobnie do (3.49)) nast^pujqcq kinematycznq postac pojemnosci 
informaci^jnei, ujyrazonq uj praujdopodobienstujach: 



gdzie, podobnie jak poprzednio dla amplitud, pozostaujilismy cai^ informacja o On w indeksie n roz- 
ktadu pn{:x.n)- 

Postac kinematyczna / zapisana uj praujdopodobienstujie: W koncu, zakiadajqc, ze zakres zmien- 
nosci ujszystkich x^^ jest dla kazdego n taki sam, pomijamy indeks n przy tej zmiennej (ale nie przy 
rozkiadzie p„), otrzymujqc: 

T f -J4„ 1 f dPn (x) dpn (x) 

Postac t^ ujykorzystamy uj Dodatku jako pierujotnq przy tuyprotuadzeniu elektrodynamiki Maxujella, 
granicy siabego pola uj teorii graujitacji oraz tujierdzenia / fizyki statystycznej. 

3.4 Roirnania master 

Podejdzmy nieco inaczej niz uj Rozdziale 3.1.1 do problemu estymacji. Rozujirimy P{@) uj sze- 
reg Taylora ujokoi praujdziujej ujartosci parametru Q i ujycaikujmy po caiej przestrzeni proby B, 
otrzymujqc: 

N 



+ 5 T, + I , (3.66) 

n,n'=l 
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gdzie uzyto oznaczenia ^gg^^ = ^^^^^ 1 0=0 (^^^ podobnie dla tuyzszych rz^doiu roziuini^cia. Ponie- 
ujaz caikoujanie zostaje ujykonane po caiej przestrzeni proby B, zatem biorqc pod uujag^ ujarunek 
normalizacji Jg dy P{Q) = dy P(6) = 1 ujidzimy, ze lema strona roujnania (3.66) jest roiuna zero. 
Pomijajqc czlony ujyzszego rz^du'', otrzymujemy: 

n,n'=l J 

Dla estymatorouj lokalnie nieobciqzonych [6] roujnanie (3.67) przyjmuje dla konkretnych n oraz n' 
nast^pujqcq postac rotunania master: 

dy ^„ I.' {9n - en){en' " ^n') = , n, n' = 1, 2, N . (3.68) 

Gdy parametr ma index Minkoiuskiego u, tutedy mozna pokazac, ze ujykorzystujqc P = Yin=iPn (y™ ) 
ID (3.68) otrzymujemy, po przejsciu do zmiennych Fisheroujskich (poroiunaj (2.223)), roiunanie majqce 
ID granicy On — )■ On nast^pujqcq postac obserujoujanq roiunania master: 

^E4^ + y^P^vl = 0, gdzie vl^= liui vl^^^, n = 1,2,..., AT, (3.69) 

b^dqcego typem rorunania ciqgiosci strumienia, gdzie t„ = y^. W (3.69) On o^az On sq odpoujiednio 
ujartosciami oczekivuanymi poiozenia oraz czasu ukiadu. 



3.5 Podsumoiranie rozirazari 

Podstaujotuym przesianiem tuyniesionym z metody estymacyjnej Friedena-Soffera jest to, ze TFI 
jest poprzednikiem Lagrangianu ukiadu [8]. Temat ten rozujiniemy u; kolejnym rozdziale. Peujnym 
minusem teorii Friedena-Soffera mogia ujydaujac si^ koniecznosc zapostuloujania noujych zasad in- 
formacyjnych. Co praiuda z puntu ujidzenia fenomenologii skutecznosc tych zasad tu ujyproujadzeniu 
duzej liczby modeli uzytecznych do opisu zjaiuisk ujydaje si^ bye caikiem satysfakcjonujqca, jednak 
ujyproujadzenie tych zasad przesun^ioby teori^ do obszaru bardziej podstaujoujego. Pozujoliioby to 
zaroujno na podanie jej przysziych ograniczeii fenomenologicznych jak i jej mozliujych teoretycznych 
uogolnieh. 

W tym kontekstcie, tq ujfasnie rol^ speinia ujyproiuadzenie strukturalnej zasady informacyjnej jako 
konsekujencji analitycznosci logarytmu funkcji ujiarygodnosci u; otoczeniu praujdziujej ujartosci pa- 
rametru oraz luskazanie geometrycznego znaczenia informacyjnej zasady ujariacyjnej, ktora lezu u 
podstauj zasady ekstremizacji dziaiania fizycznego. W obecnym rozdziale zujrocono uujag^, ze u pod- 
stauj informacyjnego zrozumienia zasady ujariacyjnej moze lezec idea idealnego pomiaru [10], przy 
ktorej ujariacja pojemnosci informacyjnej / jest roujna (z ujyjqtkiem znaku) ujariacji informacji struk- 
turalnej Q. 

W poujyzszym rozdziale ujyprouiadzono tez roxunanie master (3.68) dla funkcji ujiarygodnosci, ktore 
proujadzi do roujnania ciqgiosci strumienia dla punktoujego rozkiadu uj probie (3.69). Ciekauje jest to, 
ze roujnanie master pojatuia si^ z rozujini^cia funkcji ujiarygodnosci uj szereg Taylora ujokoi prauj- 
dzituej ujartosci parametru 0. Siiq rzeczy (por. (3.66)) nie pojaujia si^ uji^c uj nich (logarytmiczna) 

^Co jest siuszne naiuet na poziomie g^stosci o ile tylko P(0) € S nie posiada m luyzszych dzetom niz drugiego rz^du. 
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cz^sc nieliniouja struktury ukiadu. Ta gaiaz uogolnienia MNW w klasycznej statystycznej estymacji 
lezy blizej teorii procesom stochastycznych [34] niz EFI. 

Wyproujadzajqc lu Rozdziale 3.1.1 strukturalnq zasad^ informacyjnq [10] ujykazano, ze metoda Frie- 
dena-Soffera jest peiunq modyfikacjq MNW, pozujalajqcq, jak si^ okaze, na nieparametrycznq estyma- 
cji roujnan ruchu teorii pola lub roiunan generujqcych rozkiad fizyki statystycznej [8]. Wiele z tych 
roujnan otrzymano juz w [8] zgodnie z informatycznym zrozumieniem Friedena-Soffera ujspomnia- 
nym na koncu Rozdziaiu 3.2. W [16] ujyproujadzenia te zostaiy spraujdzone dla przyj^tej uj obecnym 
skrypcie fizycznej postaci zasad informacyjnych [9]. 

Jednakze dopiero ujyproiuadzenie strukturalnej zasady informacyjnej poziuala na faktoryzacj^ z ob- 
serujoujanej SI cz^sci, b^dqcej miarq probabilistycznq i uj zujiqzku z tym na praujidiouje umieszcze- 
nie rozkiadouj speiniajqcych roujnania rozniczkouje metody EFI uj odpoujiednich podprzestrzeniach 
przestrzeni statystycznej. Dlatego omoujieniu bqdz przeliczeniu niektorych rozujiqzan EFI z uujzgl^d- 
nieniem tego faktu posuji^cimy duja nast^pne rozdziaiy. 

Nalezy jednak podkreslic, ze Frieden, Soffer i ich luspoipracoiunicy Plastino i Plastino, podali metody 
rozujiqzania ukiadu (rozniczkoujych) zasad informacyjnych dla problemu EFI, ktora jest bardzo sku- 
teczna, gdyz poza ujarunkami brzegoujymi i eujentualnymi roujnaniami ciqgiosci nie jest ograniczona 
przez zadnq konkretnq postac rozkiadu. Metody tq ujykorzystamy uj dalszym ciqgu analizy. 
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Rozdzial 4 



Kryteria informacyjne w teorii pola 



Glowne estymacyjne przeslanie metody EFI. Jak stiuierdzilismy poprzednio, ponieiuaz podsta- 
ujotua mysl stojqca za metodq EFI jest nast^pujqca: Skoro IF jest infinitezymalnym typem entro- 
pii ujzgl^dnej Kulback-Leibler'a, ktora siuzy do statystycznego ujyboru pomi^dzy zaproponoiuanymi 
r^cznie modelami, zatem po dodatkoiuym r^cznym, aczkolujiek uzasadnionym, naiozeniu rozniczko- 
ujych zasad strukturalnych na ukiad, staje si^ ona metodq estymujqcq roiunania ruchu i ich ujyboru 
drog^ xuymogu speinienia zasad^ informacyjnych. Bqdz, jesli ktos ujoli, metoda EFI jest metod^ esty- 
mujqcq rokiady, ktore sq roziuiqzaniami tych roiunan. Jest tui^c to metoda estymacji nieparametrycz- 
nej. Wspomniane romnania to np. roiunania ruchu teorii pola bqdz roujnania generujqce rozkiady 
flzyki statystycznej. 

4.1 Informacja Fishera i klasyfikacja modeli 

Obecny rozdziai postui^cony jest glotunie przedstamieniu lust^pnej klasyflkacji modeli fizycznych 
ze ujzgl^du na skohczonosc (bqdz nieskohczonosc) pojemnosci informacyjnej I. Ponadto, ponizsze 
rozujazania dla modeli ze skohczonym / dotyczq ujyiqcznie modeli metody EFI. Kolejna, bardziej 
szczegoiouja klasyfikacja pozujala sklasyfikoujac modele ze ujzgl^du na ujielkosc proby N. 
Jak pokazemy mechanika klasyczna posiada nieskonczonq pojemnosc informacyjnq /. Scisle mo- 
ujiqc, mechanika klasyczna jest teoriq z symplektycznq strukturq rozmaitosci i nie posiada struktury 
statystycznej. Czasami jednak siyszy si^ stujierdzenie, ze jest ona stochastycznq granicq mechaniki 
kujantoujej. Ale i na odujrot, ujediug von Neumann'a [35] teoria kujantouja jest niespojna z istnieniem 
zespoiouj nie posiadajqcych rozmycia (rozproszenia). W zujiqzku z tym, dose poujszechnie uujaza si^, 
ze ujyst^poujanie odst^pstu; od klasycznego zachoujania si^ ukiadou; mozna uchujycic jedynie na po- 
ziomie statystycznym [36]. 

Ponizej udoujodnimy ttuierdzenie klasycznej statystyki moujiqce o niemozlituosci tuyprotuadzenia me- 
chaniki faloujej^ metody EFI z mechaniki klasycznej. W tym celu luy korzystamy statystyczne poj^cie 
pojemnosci informacyjnej, ktore jest narz^dziem dla dujoch sprz^zonych z sobq zagadnieh, a miano- 
tuicie poujyzej ujspomnianego statystyczego doujodu o nieujyproujadzalnosci mechaniki kujantoujej 

tym punkcie, dziala EFI w stosunku do estymomanego roiunania ruchu jak MNW ui stosunku do estymouianego 
parametru dla rozkiadu znanego typu. 

^Wsp61not§ mechaniki falouiej z kuiantouj§ ograniczymy do typouj rouinari rozniczkoujych zagadnienia Sturm'a- 
Liouville'a oraz zasady nieoznaczonosci Heisenberga. Doiuod przeproiuadzony lu ramach mechaniki faloiuej lu obszarze 
ujspolnym dla obu teorii faloiuych, uznajemy co najiuyzej jako przeslank^ jego shisznosci ui mechanice kuiantouiej. 
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z klasycznej i zujiqzanego z nim problemu konsystencji samospojnego formalizmu. Ostatni fakt luy- 
korzystyujany jest uj takich gai^ziach badan fizycznych jak nadprzeujodnictujo [37], fizyka atomouja 
i cz^stek elementarmych [38] oraz astrofizyka [39]. 



4.1.1 PodziaJ" modeli ze mzgl^du na oraz kategorie I 

Jak dot^d nie odnieslismy si^ do ujartosci N ujymiaru proby. Piertusza klasylikacja ztuiqzana z N 
jest ogolna. Tzn. pokazemy, ze modele nalezq do dujoch roznych, ogolnych kategorii z roznq luartosciq 
A^. Pierujsza z nich posiada skonczonq tuartosc N i jest ziuiqzana ze skonczonq luartosciq /. Obejmuje 
ona modele mechaniki falotuej i klasycznych teorii pola, gdyz jedno skonczenie luymiaroiue, poloiue 
rozujiqzanie roujnan ruchu okresla eiuolucj^ ukiadu ujraz z peinym okresleniem jego struktury uj 
przestrzeni i czasie. Natomiast mechanika klasyczna nalezy do drugiej kategorii z nieskonczonym A^, 
gdyz rozxui^anie roiunania ruchu nie okresla struktury czqstki, ktora musi bye niezaleznie od tego 
roujnania okreslona poprzez zdelinioujanie, w kazdym punkcie toru czqstki, jej punktoujej struktury 
(np. poprzez dystrybucj^ (5-Diraca). Mechanika klasyczna okazuje si^ posiadac nieskohczonq ujar- 
tosc /. 



4.1.1.1 Doirod podziaiu na dirie kategorie / 

Zobrazujmy poujyzsze slouja nast^pujqcq analizq. Dla uproszczenia rozujazmy ukiadjednoujymia- 
roujy UJ poiozeniu'^. Zaiozmy ujpieruj, ze ukiad jest opisany przez nieosobliujq dystrybucj^. Wtedy 
dla — ^ oo pojemnosc informacyjna /, (2.186), rozbiega si^ do nieskoriczonosci. Taka sama sytuacja 
zachodzi jednak dla kazdej osobliwej dystrybucji jak np. dystrybucja 5-Diraca. Spraujdzmy, ze tak jest 
istotnie. Rozujazmy punktoujq czqstk^ sujobodnq, dla uproszczenia uj spoczynku, uj poiozeniu 9, oraz 
5-DiracouJski ciqg funkcji, np. ciqg funkcji Gaussa: 

5k{yn\0) = ^ exp{-k\yn - 9)^)] , gdzie A: = 1, 2, 3, ... . (4.1) 



Wtedy, ponieujaz dla okreslonego indeksu k ciqgu (4.1), pojemnosc informacyjna (2.186): 



h = Y.j 'iy-MUnW) I g^""'^' I , gdzie t = 1, 2, 3, ... (4.2) 



E 

n=l 

jest roujna: 



A^ 

4 = — , dla A: = 1,2,3,... , (4.3) 

gdzie a1 = ^ opisuje xuariancj^ poiozenia czqstki dla k-tego elementu ciqgu (4.1), uji^c ujidzimy, ze 
Ik rozbiega si^ do nieskoiiczonosci dla A^ — )■ oo i naujet jeszcze mocniej, gdy dodatkoujo /c — )• oo. 
Posumoujujqc, dla A^ — ;> oo pojemnosc informacyjna / nie istnieje, oboj^tnie z jakq dystrybucjq mie- 
libysmy do czynienia. 

Istniejq uji^c dwie, powyzej wymienione, rozdzielne kategorie modeli odnoszqce si^ do wymiaru 
N proby. Tzn. dla jednych, takich jak mechanika falouja i teorie pola, A^ oraz / sq skohczone, podczas 
gdy mechanika klasyczna tujorzy osobnq klas^ z nieskonczonym A^ oraz /. To kohczy doujod [9] o 
nieujyproujadzalnosci modeli faloujych i teorio-poloujych z mechaniki klasycznej. 



^Wieloiuymiaroujosc czasoprzestrzenna moze, lu kontekscie obecnych roztuazari, zmienic co najujyzej znak pojemnosci 
informacyjnej. 



101 



Potuyzszy doujod nie obejmuje mozliujosci ujyprotuadzenia mechaniki falotuej (czy tez teorii kujanto- 
ujych) z klasycznej teorii pola bqdz samospojnej teorii pola [38, 40, 41]. 

Uujaga: Oznacza to, ze mechanika klasyczna nie ma skoiiczonego statystycznego pochodzenia'*, chyba, 
ze tak jak uj (4.1) ruproiuadzi si^ nieskonczonq liczb^ statystycznych parametroru, co jednak pociqga 
za sohq nieskonczonosc pojemnosci informacyjnej /. 

4.1.2 Podzial modeli ze skohczonym / na podklasy z roznym 

Jak juz ujspomninalismy, Frieden i Soffer [8] ruyproiuadzili modele falorue posiugujqc si^ poj^ciem 
pojemnosci informacyjnej / oraz zasadami informacyjnymi estymacyjnej metody EFI. Rozujiniemy 
ten temat uj dalszej cz^sci obecnego rozdziaiu. Na razie zauujazmy, ze stosujqc zasadniczo'^ jednocze- 
snie obie zasady informacyjne, strukturaln^ V + C + kq = 0, (3.43), oraz ujariacyjnq 5{I + Q) = 0, 
(3.44), oraz uujzgl^dniajqc odpoujiednie fizyczne uji^zy (tuyrazone narzuceniem na ukiad np. roujna- 
nia ciqgiosci, symetrii oraz ujarunkou; brzegoujych), otrzymujemy zroznicoujanie ze ujzgl^du na N 
modeli posiadajqcych skonczone ujartosci N oraz /. I tak roujnanie Kleina-Gordona oraz roujnanie 
Schrodingera jako jego nierelatyujistyczna granica (por. Dodatek 7.2) posiadajq rang^ pola N = 2, 
roujnanie Diraca posiada = 8, roujnania Maxujell'a posiadajq = 4, a teoria graujitacji, zasadni- 
czo bardziej uj uj^ciu Logunova [42] niz ogolnej teorii ujzgl^dnosci, posiada = 10 (Dodatek 7.3.2). 

4.1.3 Konkluzje i konsekvuencje podziaiu modeli na kategorie / 

Poujyzej otrzymalismy rezultat moxuiqcy, ze ujszystkie modele opisane strukturalnq zasady infor- 
macyjnq nalezq do kategorii skonczonej ujartosci pojemnosci informacyjnej / oraz, ze mechanika 
klasyczna nalezy do kategorii nieskohczonego /. Zatem uj ramach zagadnieh rozujazanych uj skryp- 
cie, granica nie lezy pomi^dzy tym co micro a makro, ale przebiega pomi^dzy teoriami, ktore majq 
pochodzenie statystyczne oraz tymi, ktore majq pochodzenie klasyczno-mechaniczne. Albo lepiej, po- 
mi^dzy tym co ma pochodzenie falouje lub szerzej, teorio-polouje, oraz tym co ma pochodzenie scisle 
punktoiue. 

Ponieujaz w konstrukcji modeli klasycznej teorii pola oraz mechaniki falotuej, uzyty jest ten sam staty- 
styczny formalizm informacji Fishera, dlatego jest ona roujniez ujiasciujym narz^dziem uj konstrukcji 
samospojnych teorii pola [38], iqczqc modele mechaniki faloujej i klasycznej teorii pola uj jeden, lo- 
gicznie spojny aparat matematyczny. 

Jak ujiemy, aby otrzymac jakqkoltuiek teori^ pola, metoda EFI uzyuja dujoch noujych zasad, ujariacyj- 
nej (3.44), ktora minimalizuje caikoujitq fizycznq informacji ukiadu oraz obserujoujanej (3.43) i ocze- 
kiujanej (3.45) zasady strukturalnej, ktora tq informacji zeruje. Frieden i Soffer [8] zujrocili uujagi, ze 
poj^cie informacji poprzedza poj^cie fizycznego dziaiania, a ujproujadzony formalizm mozna slusz- 
nie nazujac podejsciem Friedena do roujnah ruchu. Sporo tez na tej drodze konstrukcji modeli fi- 
zycznych juz zrobiono. Jednakze liczne zagadnienia, ze ruzgl^du na odmienne niz uj [8] zrozumienie 
zasady strukturalnej (patrz [9, 16, 10] oraz obecny skrypt), ujymagajq ponoujnego zinterpretoujania 
i zrozumienia. Ciqgle na ogolne opracoujanie czeka ujproujadzenie do formalizmu informacyjnych 
poprzednikouj zrodei oraz lepsze zrozumienie fizyki lezqcej u podstauj znaczenia ujymiaru proby A^. 

^Frieden co pramda myproiuadzii rotuniez mechanik^ klasyczn^ z mechaniki faloiuej, ale jedy nie jako graniczny przypa- 
dek h ^ 0, a luartosc lu tym iryproiuadzeniu jest nieistotna [8]. 

^Wyjqtkiem jest rotunanie Kleina-Gordona, lu luyproiuadzeniu ktorego odmolujemy si§ jedynie do zasady luariacyjnej, 
natomiast struktura ukiadu jest narzucona z gory (por. (4.34).) 
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Ponizsze roziuazania sluzq usystematyzoujaniu istniejqcego juz statystycznego aparatu poj^cioujego 
informacji kinetycznej i strukturalnej metody EFI oraz lepszemu opisouji zuji^zku informacji fizycznej 
z caikq dziaiania. 



4.2 Roirnania rozniczkoiue metody EFI 

Kolejna cz^sc obecnego rozdziaiu posiui^cona jest omoujieniu rozmi^zan zasad informacyjnych 
metodq EFI dla modeli mechaniki faloujej i teorii pola [43]. Punktem ujyjscia jest pojemnosc informa- 
cyjna / uj jej kinematycznych postaciach (3.51): 



ujyproujadzonych w Rozdziale 3.3, gdzie xj^ sq zgodnie z (3.47) przesuni^ciami tnartosci pomiaroujych 
poiozenia zebranymi przez ukiad od ich ujartosci oczekiiuanych. Wyproxuadzenie (3.51) oraz (3.60) 
zostaio zaprezentoujane u; Rozdziale 3.3 i nie zakiada ono {w przeciujieristujie do orginalnego ujypro- 
ujadzenia Friedena-Soffera) koniecznosci istnienia niezmienniczosci przesuni^cia rozkiadouj praujdo- 
podobienstuja. Peujne informacje na temat niezmienniczosci Lorentzoujskiej pojemnosci informacyj- 
nej / zostaiy podane uj Rozdziale 2.7.1. 

Uogolnienia poujyzszych kinematycznych postaci na przypadek tuyst^poujania uj ukiadzie pol cecho- 
luania omoujimy uj dalszej cz^sci rozdziaiu. 

4.2.1 Ogolna postac funkcji g^stosci TFI oraz obsertuoujane zasady informacyjne 

Wyproujadzenie strukturalnej zasady informacyjnej zostaio przedstaujione uj Rozdziale 3.1.1. Od- 
ujoiuje si^ ono do peinych danych pomiaroujych (yn)^=i, ale jego postac dla przesuni^c (x„)^^^ jest 
dokiadnie taka sama [10]. Tak uji^c, ponizej stosoujane zasady informacyjne, strukturalna oraz ujaria- 
cyjna, b^dq odujoiyujaiy si^ do miary probabilistycznej dxp„(x) okreslonej na przestrzeni przesuni^c 
X G jako przestrzeni bazoujej, gdzie jest czasoprzestrzeniq Minkoujskiego R^. 

Przystqpmy do przedstaujienia konstrukcji mechaniki faloujej i teorii pola zgodnie z metodq EFI. We- 
diug roujnania (3.31) TPI zostaia okreslona jako K = Q + I. Ponieujaz przesuni^cie x„ nie zalezy od 
parametru 6m dla m ^ n oraz zakres caikoujania dla ujszystkich x„ jest taki sam, dlatego / redukuje 
si^ do diagonalnych postaci (3.51) bqdz (3.60), a Q do postaci: 



zgodnie z oznaczeniem uj (3.25), bqdz uj przypadku pola V'(x), (3.55), do ogolnej (jak zujykle rzeczy- 
tuistej) postaci: 




bqdz (3.60): 





(4.4) 



Q = Qip = I 



N/2 



Jx 



d^X ^ C(x)V'n'(x)cft,(V(x),r(x),V('Hx),r^')(x)), 



(4.5) 



n,n'=l 
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przy czym caia funkcja podcaikouja jest ujielomianem pol ip{x.) oraz ^*(x), stopnia nie mniejszego 
niz 2, oraz ich pochodnych rz^du I = 1,2, ... (por. (3.19)), natomiast cf jest petunq obserujoujanq 
(nj ogolnosci zespolonq) informacjq strukturalnq ukiadu. Konkretn^, jak sie okazuje prostq postac Q 
dla przypadku pol skalarnych Kleina-Gordona oraz pola Diraca omotuimy ponizej. 



G^stosc TFI: Korzystajqc z (3.51), (4.4) oraz (3.31), mozemy zapisac TFI w postaci: 



8 = K 



d xk , 



X 



gdzie dla pola opisanego amplitudami q^. 



N 



k = A^ 



n=l 



u=0 



natomiast dla pola opisanego amplitudami ipn- 



N/2 



AN 



n,n'=l 



u=0 



1 



+ ^ C(x)V'n'(x)cfl,(V'(x),V'*(x),^«(x),V^*«(x)) 



(4.6) 



(4.7) 



(4.8) 



R6ujnou;aznosc w (4.6) sugeruje, ze K pelni funkcja statystycznego poprzednika (calhi) dzialania 
S, natomiast k, h^dqce funkcjq gfstosci TFI, jest statystycznym poprzednikiem gfstosci Lagrangianu 
C. Spraujie tej posuji^cimy jeden z ponizszych rozdziaiouj. 



Uiuaga o sformuioujaniu Lagrange'a i rzqd dzetouj funkcji luiarygodnosci: W dalszej cz^sci skryptu 
zaiozymy, ze obserujoujana informacja strukturalna nie zaxuiera pochodnych pol rz^du xuyzszego niz 
/ = 1. Zalozenie to ma charakter lizyczny. Oznacza ono, ze jesli ujspoirz^dne uogolnione (u nas ampli- 
tudy) oraz pr^dkosci uogolnione (u nas pochodne amplitud) ukiadu sq zadane uj peujnej chujili czasu, 
to eujolucja ukiadu jest caikoujicie okreslona, o ile roujnania ruchu sq 2-giego rz^du. Odpoujiada 
to sformuioujaniu Lagrange'a ujykorzystyujanemu uj badaniu dynamicznych i termodynamicznych 
ujiasnosci ukiadotu. 

Fakt ten z punktu ujidzenia statystycznego oznacza, ze interesujq nas tylko takie (pod)przestrzenie sta- 
tystyczne, dla ktorych ujszystkie mozliuje logarytmy funkcji ujiarygodnosci posiadajq ''-jety Jp{S, R) 
UJ otoczeniu Up punktu p = P{Q) G S rz^du r < 2 (por. Rozdziai 2.3). Jest to istotne z punktu uji- 
dzenia obserujoujanej IF (3.4) zdefinioujanej pierujotnie poprzez drugie pochodne logarytmu funkcji 
ujiarygodnosci po parametrach, co z kolei utuozliujia konstrukcj^ strukturalnej zasady informacyjnej 
(Rozdziai 3.1.1), ktora jest roujnaniem metody EFI. 

Jednoczesnie oczekiujana IF (3.13) ujchodzi uj nieroujnosc Rao-Cramera, ktorej peiun^ postaci^ jest, po 
dokonaniu uj informacji Fishera transformacji Fouriera do przestrzeni p^doujej, zasada nieoznaczono- 
sci Heisenberga (Dodatek 7.1). Zatem fakt ujyst^poujania uj funkcji Lagrange'a kujadratu pierujszych 
pochodnych byiby (z tego punktu ujidzenia) artefaktem koniecznosci ujykonania przez ukiad esty- 
macji jego czasoprzestrzennych poiozeh, ktora to estymacja posiada dolne ogranicze Rao-Cramera na 
dokiadnosc jednoczesnej estymacji poiozenia oraz pr^dkosci. 
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Warunek staiosci metryki Rao-Fishera: Odpotuiedzmy jeszcze na pytanie, co z punktu tuidzenia 
statystycznego oznacza nieujyst^poujanie lu roziuini^ciu InP(B) w szereg Taylora (3.15) ujyrazouj 
rz^du ujyzszego niz drugi (tzn. brak jetoiu o rz^dzie r > 2). Sytuacja ta ma miejsce, gdy obseriuoujana 
informacja Fishera iF, (3.4), nie zalezy od parametru e Ve, gdzie Ve jest przestrzeni^ parame- 
tru 0. Wtedy boiuiem jej pochodne po parametrze = {On) w roujne zero dia kazdego punktu 
p' = P{Q') w otoczeniu Up. Zatem: 

alr^U^. =g|7(- ^'g(^f^ )Ur/, =0 ^ ,;(5,R)-j,2,(5,R) = 0dlar>2, (4.9) 

gdzie jp{S,'R) jest doujolnym elementem przestrzeni jetouj Jp{S,R). Leuja strona poujyzszej impli- 
kacji oznacza, ze: 

{iF)nn' \p'e Up = const, na Up, (4.10) 

tzn. obserujoujana informacja Fishera iF nie zalezy uj Up od parametru 0, z czego ujynika nie- 

zaleznosc oczekiwanej IF, czyii metryki Rao-Fishera, od parametru uj Up. 

Takie zachotuanie si^ metryki Rao-Fishera ma nast^pujqcq ciekaujq konsekujencj^. Otoz uj Rozdziale 

5.2.3 okaze si^, ze fakt staiosci metryki Rao-Fishera (5.216) jest odpoujiedzialny za otrzymanie uj ra- 

mach metody EFI znanych formui mechaniki kujantomej (5.232), opisujqcych splqtanie uj problemie 

EPR-Bohm'a. 

4.2.1.1 Postac obserujoujana zasad informacyjnych 

Naiozmy na uklad informacyjnq obserujoujanq zasad^ strukturalnq i' + C + nq = 0, (3.43), oraz 
informacyjnq zasad^ ujariacyjnq S{I + Q) = 0, (3.44). 

Przypadek z amplitude q: Ze zmodyfikoujanej obserujoujanej zasady strukturalnej (3.43), bior^c pod 
uujag^ ujczesniejsze przejscia pomi^dzy (2.31), (2.231), (2.235) oraz (3.51), ujynika ujarunek zeroujy: 

E + J g^(x) cf Jgn(x)) = , n = l,2,...,Ar. (4.11) 

Natomiast z zasady ujariacyjnej (3.44) luynika ukiad romnan Eulera-Lagrange'a: 

yJ-(^h\=^L^^ n = l,2,...,N, (4.12) 
gdzie k zostaio podane uj (4.7). 

Przypadek z amplitude ip: Odpoujiednia dla pola ip obseruJOUjana, zmodyfikoujana postac zasady 
strukturalnej (3.43), ktora bierze pod uujag^ (3.60), jest nast^pujqca: 



3 



u=0 



+ I E C(x)^„'(x)cfi,(^(x),^(x),^,^^)=0, n=l,2,...,iV/2. 

n'=l 
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Natomiast ukiad roiunan Eulera-Lagrang'a tuynikajqcy z zasady tuariacyjnej (3.44) jest nast^pujqcy: 
d I dk \ dk , , , 

gdzie k zostaio podane uj (4.8). 

Zauujazmy, ze poujyzsza postac k, (4.8), jest na tyle ogolna, ze aby zobaczyc dziaianie metody EFI ujy- 
nikajqce z roujnan (4.13) i (4.14), nalezy podac konkretnq postac k, dla kazdego zagadnienia z polem 
typu Tp z osobna. 

Natomiast, jak si^ przekonamy, roiunania (4. 1 1) oraz (4. 1 2) z amplitudami qn sq juz zapisane uj postaci 
bliskiej ich bezposredniego uzycia i otrzymania jaujnej postaci cf „ oraz rozujiqzan metody EFI, czyli 
odpoujiednich lizycznych roujnan ruchu (bqdz roirnan generuj^cych, por. Rozdziai 5) dla amplitud 

gn(x). 

Let us summarize this Section. Postacie kinetyczne (3.51) oraz (3.60), oparte o informacj^ Fishera (2.5), 
sq ujykorzystyuiane do konstrukcji rouinah ruchu (lub roxunan generujqcych rozkiad) modeli lizycz- 
nych. Wyst^pujq one w (4.11)-(4.14). Natomiast pierujotna postac pojemnosci / ma sujoj poczqtek uj 
(3.20) oraz uj (3.4) i (3.18). Zgodnie z (3.45), postacie te sq rouinouiazne na poziomie oczekiuianym. 
Przy samospojnym rozuiiqzyujaniu strukturalnej i ujariacyjnej zasady informacyjnej metody EFI, ujy- 
korzystyujana jest postac obserujouiana zasady strukturalnej (3.43), ujynikajqca z zqdania analityczno- 
sci logarytmu funkcji ujiarygodnosci oraz metrycznosci przestrzeni statystycznej S (por. Rozdziai 3.1.1). 
Natomiast oczekiuiana strukturalna zasada informacyjna (3.12) jest narz^dziem pomocniczym uj de- 
finicji caikoujitej lizycznej informacji K, (3.31), oraz informacyjnej zasady ujariacyjnej (3.44). 

Ponizej przekonamy si^, ze ujszystkie modelouje roznice lezq po stronie cf ktorej postac zalezy od 
konkretnego fizycznego scenariusza, ujiqczajqc xu to symetrie oraz ujarunki brzegouje. 
Po raz pierujszy roujnania (4.11) oraz (4.12) otrzymali Frieden i Soffer [8]. Jednak poujyzsza ich forma 
uujzgl^dnia innq interpretacj^ Q (jako obecnej stale podczas eujolucji ukiadu) oraz faktoryzacj^ pro- 
babilistycznego czynnika g^j(x) zaujartego obligatoryjnie uj mierze caikoujej^. 

4.3 TFI oraz specyficzne formy Q w teorii pola 

Ponizej zebrano i rozujini^to ujyniki EFI otrzymane poprzednio w [8]. Jednakze zapisano je, szcze- 
golnie dla Q, uj otujartej formie z punktu ujidzenia analizy poroujnaujczej modeli [43]. Metoda EFI 
proxuadzi do takiego sformuioujania metody teorii pola, ktora jest zgodna z dzisiejszym opisem me- 
chaniki faloujej dla szerokiej klasy struktur. 

Jednakze, czasami metoda EFI ujraz z caiym toujarzyszqcym jej statystycznym aparatem poj^cioujym 
moze doproujadzic do korekty istniejqcej analizy. Z sytuacjq takq mozemy miec do czynienia np. uj 
przypadku sformuioujania zasady nieoznaczonosci Heisenberga dla pola swietlnego. Otoz uj sujietle 
noujych eksperymentouj, uj ujyniku ktorych otrzymano za wqski impuls swietlny w cz^stotliwo- 
sci [44], standardouja Fourieroujska podstauja zasady nieoznaczonosci jest ostatnio kujestionoxuana. 
Wytlumaczenie istoty nieroumosci Heisenberga uj oparciu o nieroumosc Rao-Cramera ujraz z rozroz- 
nieniem pomi^dzy estymacjq parametru uj przypadku skalarnym [8] (por. Dodatek 7.1) i ujektoroujym, 

^Romniez luypromadzenie zasady strukturalnej (4.11) czyni mniej fundamentaln^ niz m sformulomaniu Friedena- 
Soffera [8], a tym co staje si^ fundamentalne jest funkcja luiarygodnosci P{0) probki, czyli l^czna g^stosc prauidopo- 
dobienstuja jej (nieiuidocznej dla badacza) realizacji. 
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dla ktorego zachodzi ci^g nieroujnosci (2.138), moze okazac si^ kluczem do zrozumienia pytan, nara- 
stajqcych na skutek noujych eksperymentoxu ze smiatiem. 



W metodzie EFI, informacja strukturalna Q musi zostac tuyprotuadzona z uzyciem zasady struk- 
turalnej, ujariacyjnej i czasami peujnych dodatkoujych ujarunkotu symetrii, biorqcych pod utuag^ 
specyliczny lizyczny scenariusz teorii. Szeroki opis metod stosotuanych przy rozujiqzyiuaniu rotunari 
(4.12) oraz (4.11) mozna znalezc w [8]. 

Jednak ponizsze rozujazania poujinny okazac si^ pomocne uj zrozumieniu metody, szczegolnie dla 
ukiadu zasad informacyjnych (4.13) oraz (4.14) dla pola ijj. Ponizej zostanie pokazane jak mozliiue roz- 
luiqzania zasad informacyjnych, strukturalnej i ujariacyjnej, przeujiduje pojaiuienia si^ trzech typoiu 
pol: A^-skalaroxu [43], fermionoiu oraz bozonouj [8]. 



4.3.1 Informacja Fouriera 

Rozujazmy czqstk^ jako uklad opisany polem rangi N poprzez zbior zespolonych funkcji faloujych 
V'n(x), n = 1,2, ...,N/2, okreslonych uj czasoprzestrzeni X poiozeh x = (x^)^^q = {ct, x^, x^, x^), 
zgodnie z konstrukcjq (3.53) oraz (3.54) z Rozdziaiu 3.3. Ich transformaty Fouriera (/'n(p) uj sprz^zo- 
nej do przestrzeni przesuni^c X, energetyczno-p^doujej przestrzeni V czterop^douj p = (p^)^^Q = 
(f , P^ P^ P^). majci postac: 

0n(p) = ^^£d^x V'„(x)e*(^'-oX^P^)A , (4.15) 
gdzie Yl^u=Q ^^Pi^ = Et - X]f=i x'p', a jest staiq Plancka. 

Uujaga: Transformacja Fouriera jest unitarnq transformacjq zachowujqcq miar^ na przestrzeni 
funkcji caikoujalnych z kujadratem, tzn.: 

/ (i4xV:(x)Vm(x)= / d'^pC(p)'Am(p) , (4.16) 

zatem ujykorzystujqc ujarunek normalizacji praujdopodobiehstuja (3.62) otrzymujemy '': 

N/2 N/2 

^ / ci^x|^„(x)|2 = / d^p\Mp)\' = 1 , (4.18) 

gdzie |?/'„(x)p = ipni^) V'r!.(x) oraz |(/)„(p)p = (l)n{p) (t>n{p)- Korzystajqc z (4.15) mozemy zapisac / 
podane ujzorem (3.60) uj nast^pujqcy sposob: 



/ [^(X)] = / [0(p)] = ^ y^^4p^^|^^(p)|2(__^2)^ (419) 

gdzie p2 = ^3^_^ p^pfc. 



n=l 



Romnosc: 

/ rf*xV'^(x)?/>„(x) = / d''p(/);(p) (?!)„(p) , (4.17) 



jest tresciq tmierdzenia Parseval'a. 
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Okreslenie kujadratu masy czqstki: Ponieiuaz / jest z definicji sumq po ujartosciach oczekiiuanych 
(por. (2.207) i (2.210)), dlatego kmadrat masy czqstki zdelinioujany jako [8]: 



m 



1 r ^'^ f2 

■■=-2 d'vY.\^n{p)\'{^-p') 



(4.20) 



jest staiq niezaleznie od statystycznych fluktuacji energii E oraz p^du p, tzn. przynajmniej ujtedy, 
gdy caikoiuanie jest ujykonane (czyli jako srednia). Tak uji^c, dla czqstki sxuobodnej mozemy (4.19) 
zapisac nastQpujqco: 



/ [^/'(x)] = / [(/)(p)] = 4iV( — ) = const. . 
Informacja Fouriera z ip: Poujyzszy ujarunek oznacza, ze: 

I[i,{^>^)]-I[cl>{p'^)] 







(4.21) 



(4.22) 



CO korzystajqc ze staiosci 4A^(^)^ oraz (4.18) mozna zapisac jako ujarunek speiniony przez pole 
stuobodne rangi N: 



Kf = 4iV 



/. N/2 
"'^ n=l 



E 

u=0 



9^ J a^-^ir 







(4.23) 



Wielkosc Kp deliniuje tzuj. informacja Fouriera (F), a kp jej g^stosc: 

3 



Af/2 
n=l 



E 

y=0 



(4.24) 



Pomijajqc fakt, ze z potuyzszych rachunkotu tuylania si^ jako srednia, rotunanie (4.22), a zatem 
(4.23), jest odbiciem truierdzenia Parseval's (4.17) i jako takie jest ono zdaniem tautologicznym. Fakt 
ten oznacza, ze transformacja Fouriera odzujierciedla jedynie zmian^ bazy uj przestrzeni statystycz- 
nej S. Dlatego tez, sam z siebie, ujarunek (4.23) nie nakiada zadnego dodatkoujego uji^zu na ukiad, 
chyba, ze 4N{^)'^ jest zadana jako informacja strukturala Q ukladu. Tyiko tutedy (4.23) staje 
si^ informacyjnq zasadq strukturainq dla ukiadu delinujqcego szczegolny typ pola omaxuianego u; 
Rozdziale 4.3.2. 



4.3. 1 . 1 Informacja Fouriera dla amplitudy rzeczyujistej 

Rozujazmy z kolei czqstk^, jako ukiad opisany polem rangi N okreslonym poprzez zbior rzeczyuji- 
stych amplitud gn(x), n = 1,2, N, na czasoprzestrzeni przesuni^c x = (x'')^^q G X i posiadajqcq 
pojemnosc kanaiu informacyjnego jak uj (3.51). Zespolone transformaty Fouriera qn{p) rzeczyiuistych 
funkcji (?n(x), gdzie p = (p'^)^=o ^ jest czterop^dem, majq postac: 

Up) = 1^ (/„(x) e^CELox-p.)/^ . (4.25) 

Podobnie jak uj (4.16), transformacja Fouriera speinia zujiqzek: 

/ d'^^Qni^)Qm{y^) = d'^pq*{p)qm{p) ■ (4-26) 
Jx Jv 
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Wykorzystujqc luarunek unormoujania pratudopodobienstiua: 

N 



1^ / d^xg2(x) = l, (4.27) 

n=l 



otrzymujemy, jako konsektuencj^ tiuierdzenia Parseval'a: 

N ^ , N 



d'Wni^) = li2[ = 1 , (4.28) 

n=l-' n=l-'^ 

gdzie |g„(x)|2 = g,2(x) i |g„(p)|2 = g;(p)g„(p). 

Informacja Fouriera dla q: Podobne rachunki jak ujykonane poprzednio dla zespolonego pola rangi 
A'^, proujadzq w przypadku pola okreslonego poprzez zbior N rzeczyujistych amplitud gn(x) i dla 
pojemnosci informacyjnej kanaiu /, (3.51), do nast^pujqcej jego postaci: 



/ [g(x)] = / [g(p)] = 1 ^ l^~-(P)l' - ) ' (4.29) 

gdzie p2 = ^3^_^ p^pfc. 



Okreslenie kujadratu masy czqstki: Zatem podobnie jak dla pola zespolonego, roiuniez dla pola rze- 
czyujistego, kiuadrat masy czqstki zdefinioujany nast^pujqco: 



-2 j d'vY.\^nm\^-p') (4.30) 



N i 



n=l 



jest stal^, ktora nie zalezy od statystycznych fluktuacji energii E oraz p^du p. Tak lui^c i dla czqstki 
opisanej polem rzeczytuistym rangi N, mozemy (poroiunaj (4.21)) zapisac (4.29) uj postaci: 

/ [g(x)] = / [g(p)] = AN C^f = const. , (4.31) 

CO oznacza, ze ujarunek (2.209), / > 0, pociqga za sobq uj zgodzie z (4.31) ujarunek ni^ > 0, moujiqcy o 
nieobecnosc tachionou; uj teorii [30], a ujynikajqcy z jej przyczynoujosci, zgodnie z (2.226) oraz (2.225). 
Zaumazmy, ze uj zgodzie z (4.30), zeroujanie si^ masy cz^stki byioby niemozlitue dla czasoprzestrzeni 
z metrykq Euklidesoujq (2.215). 

Informacja Fouriera dla pola typu q: Zujiqzek (4.31) pozujala na zapisanie informacji Fouriera, uj 
przypadku rzeczyujistego sujobodnego pola rangi N, uj nast^pujqcej postaci: 



N 

Kf = A ' 



n=l 



3 
u=0 



. (4.32) 



Wnioski piynqce z zastosoiuania potuyzszej postaci informacji Fouriera uj przypadku pola bezmaso- 
ujego, mozna znalezc uj Dodatku 7.3.1. 
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4.3.2 Skalary Kleina-Gordona 

RozLuazmy pole skalarne, ktorego TFI oznaczmy jako Ks- Rotunanie ruchu Kleina-Gordona dia 
sujobodnego pola skalarnego rangi N ujynika z tuariacyjnej zasady informacyjnej (3.44): 

= , (4.33) 

gdzie na = ks, okreslone ogolnie zujiqzkiem (4.8), naiozony jest dodatkoujy tuarunek, ujynikajqcy z 
nast^pujqcej postaci informacji strukturalnej Q: 

Q [m] = Qs = d^^qs ^ - 4iV(^)' • (4.34) 

Dla sujobodnego skalarnego pola Kleina-Gordona, TFI jest roujna jego informacji Fouriera (4.23), tzn. 
K = Ks = Kp. Poujyzej jest g^stosci^ informacji strukturalnej dla pola skalarnego: 

N/2 

q, = -4N{'^fY.'f':4.n. (4.35) 

n=l 

Zatem z ujariacyjnej zasady informacyjnej 5(^*-^Ks = ujynika N/2 roujnan Eulera-Lagrange'a (4.14), 
ktore dla g^stosci TFI roujnej k = ks = kp, (4.24), proujadzq do N/2 roujnan Kleina-Gordona^. Ich 
ujyproujadzenie mozna znalezc w [8, 16]. 

Uzasadnienie faktu, ze pole (tpn) z g^stosciq informacji strukturalnej q^ zadanq przez (4.35) jest polem 
skalarnym, ujymaga roziuazan zujiqzanych z badaniem reprezentacji transformacji izometrii pojem- 
nosci kanaiu informacyjnego /, co odkiadamy do Rozdziaiu 4.3.3.2. 

Niezmienniczosc Fouriera zasady strukturalnej: Ponieujaz dla (4.34) tuarunek (4.23) stanouji ocze- 
kiiuanq strukturalnq zasady informacyjnq I + Q = 0, (3.12), zatem dla sujobodnego pola skalarnego 
transformacja Fouriera jest transformacjq unitarnq, ze ujzgl^du na ktorq ujarunek (4.23) pozostaje nie- 
zmienniczy. 

Masa ukladu a Fourieroujskie splqtanie: Poujyzszy fakt oznacza, ze transformacja Fouriera tujorzy 
rodzaj samosplqtania pomi^dzy reprezentacji poiozenioujq a p^doiuq realizoujanych ujartosci zmien- 
nych ukiadu ujyst^pujqcych uj / [8], a ujyproujadzenie oczekiujanej zasady strukturalnej I + Q = 0, 
(por. (3.12)), jako konsekujencji analitycznosci logarytmu funkcji ujiarygodnosci [10], ujyjasnia je jako 
splqtanie p^doujych stopni sujobody ukiadu spoujodoiuane jego mas^ (4.20). 

Uujaga: Podkreslmy, ze uj przypadku sujobodnego pola skalarnego, oczekiujana zasada structuralna, 
I + Q = 0, jest jedynie odbiciem ujarunku (4.34). Jest on ujarunkiem brzegoujym i nie jest on rozujiq- 
zyujany samo-spojnie ujraz z ujariacyjnq zasadq informacyjnq (4.33). 

Typy pol skalarnych: Podajmy ujynikajqce z poujyzszej analizy metody EFI duja typy pol skalarnych: 

Zwykle (naladowane) pole skalarne: Pole skalarne majqce rang^ N = 2 ma tylko jednq skiadoujq 
zespolonq, tzn. -0 = (V'n) = V'l [8]- W przypadku tym informacja strukturalna (4.34) jest roujna 
Qs = — 8(^)^. Naiadoujane pole skalarne Higgsa [45] mogioby teoretycznie bye jego przykia- 
dem. 

®Patrz roujnanie (4.56) uj przypisie. 
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N-skalary: W przypadku n > 1 skiadotue Tpn podlegajq eiuolucji opisanej przez n = N/2 nie sprz^zo- 
nych roujnan Kleina-Gordona z dujoma dodatkotuymi tui^zami. Pierujszy z nich oznacza, ze ujszystkie 
pola tl^n majq tak^ samq mas^ m, a drugim jest luarunek normalizacji (4.18). Informacja strukturalna 
Q takiego ukiadu jest okreslona przez ogolnq postac (4.34) dia pola skalarnego rangi N. Owe skalarne 
pola Kleina-Gordona rangi N nazujijmy N-skalarami [43]. Sq one teoretycznie realizotuane u; ramach 
tztu. cj-modeli teorii pola [46, 43]. 

W kolejnym rozdziale omoujimy postac TFI oraz Q dIa roiunania Diraca. Podstaujouje fakty metody 
EFl dIa pol cechoujania uj elektrodynamice Maxiuella [8] omoiuione sq uj Dodatku 7.3.1. Rotuniez uj 
Dodatku 7.3.2 zamieszczona jest postac Q w teorii graujitacji [8]. W opracoiuaniu jest postac Q dla pol 
nieabeloujych [43]. 

4.3.3 TFI roujnania Kleina-Gordona dla pol rangi 

Rozdziai ten posuji^cony jest konstrukcji roujnania Diraca metody EFl, z uujzgl^dnieniem pol 
cechoujania^. Szczegolnq uujag^ zujrocono na problem kujadratury TFI pola Kleina-Gordona [8, 43]. 

4.3.3.1 Wst^pna foliacja S oraz pochodna koirariantna. Ogolny zarys problemu 

Wybor przestrzeni bazoiuej czionu kinetycznego: Wyjsciouja struktura modelu EFl opieraia 
si^ o analiz^ ujartosci oczekituanej informacji lizycznej K = I + Q na przestrzeni bazoiuej proby 
B = yi X yi X ... X y]\[. Mezaleme zmienne losouje Yn, n = 1,2,...,N , przyjmoujaiy ujartosci 
Yn G yn- Po przejsciu od peinych danych y = {yn)n=i ^ B do niezaleznych zmiennych losoujych 
przesuni^c Xn = Yn — On, n = 1,2, ...,A^, oraz utozsamieniu zbiorou; ujartosci tych zmiennych lo- 
soujych, tzn. przyj^ciu, ze Xn=i = X, n = 1,2, N , zostaiy skonstruoujane kinematyczne postacie 
pojemnosci informacyjnej (3.51) oraz (3.60). Zatem przestrzeniq bazowq czlonow kinetycznych jest 
zbior przesuni^c X. 

Estymacja na ujloknach: Zatem model EFl, z ktorego tuyioni si^ model teorii pola jest budoujany 
na przestrzeni bazowej X, b^dqcej uj rozujazanych przez nas przypadkach czasoprzestrzeniq Min- 
koujskiego X = R^. Pojaujiia si^ ona jako konsekujencja transformacji modelu statystycznego S z 
okreslonego uj przestrzeni parametru Ve = -^^ do przestrzeni przesuni^c X. Jednakze jednoczesnie, 
tak przed jak i po jego przedelinioujaniu, model statystyczny pozostaje zdelinioujany ponad przestrze- 
ni^ bazoujq B, ktora jest oryginainq przestrzeni^ proby. Nast^pnie, uj celu uczynienia kinematycznej 
postaci pojemnosci informacyjnej I niezmienniczq ze ujzgl^du na lokalne transformacje cechouja- 
nia, musimy, poprzez zdefinioujanie pochodnej koujariantnej na przestrzeni bazoujej X, zapisac / uj 
postaci ujspoizmienniczej. Z kolei, zdefinioujanie tej pochodnej koujariantnej oznacza koniecznosc 
podania ukiadu ujspoirz^dnych na przestrzeni statystycznej S, co ujynika z tego, ze pola cechoujania 
sq (jak si^ okaze) amplitudami typu qn (por. Dodatek 7.3.1). 

Zatem tuproujadzenie ukiadu ujspoirz^dnych na S nie jest zadaniem tryujialnym [6]. Sytuacja ta ujy- 
nika z koniecznosci ujykonania analizy EFl dla pol rangi A^, ktore z gory przeksztaicajq si^ zgodnie z 
transformacjami, ktorych parametry mogq zalezec lokalnie od poiozenia uj przestrzeni bazoujej X. Za- 

'Zgodnie z uiragq uczynionq poiuyzej, skrot rezultatoiu metody EFl dla samych pol cechoiuania m elektrodynamice 
Maxmella znajduje si§ in Dodatku 7.3.1. 



Ill 



tem na X okreslana jest strukturalna grupa symetrii G ujspomnianej poiuyzej transformacji, ktora uj 
teorii pola jest grupq Liego pola cechoiuania. Konstruuje si^ lui^c giotunq ujiqzk^ ujioknistq E{X,G) , 
a fizycznq estymacj^ przeproiuadza si^ na uji6knach^°. 

Zaumazmy, ze skoro kxuadrat pola cechoiuania jest elementem S, wi^c dla okreslonej algebry grupy 
cechoujania, ujybor cechoiuania dokonuje cz^scioiuej foHacji^^ przestrzeni S na pieriusze luarstiuy. 
Dopiero id tym momencie, zasady informacyjne umozHiuiajq dokonanie luybom kolejnych foliacji 
przestrzeni S na luarstiuy ziuiqzane z ujszystkimi szczegolnymi reprezentacjami grupy G [43], ktorych 
ujymiar jest scisle ziuiqzany z rang^ pol N [8]. 



Sens poiryzszego rozirazania ujmijmy tak: Caia procedura EFI musi nie tyiko od poczqtku luybrac 
typ ampHtudy (tzn. g„ lub tpn), okreshc zasady informacyjne i ujarunki brzegoiue, ale musi bye ujyko- 
nana od poczqtku lue luiasciiuym ukiadzie luspoirz^dnych, ktory uiuzgl^dnia istnienie strukturalnej 
grupy symetrii G oraz ziuiqzanych z niq pol cechoiuania. Pole cechoiuania umozliiuia boiuiem luybor 
podprzestrzeni T-pH przestrzeni stycznej T-pE luiqzki gioiunej E = E{X,G) vo kazdym jej punk- 
cie V, tak, ze TpE = T-pG ® TpH, przy czym baza na TpH moze bye zdefinioujana jako linioiua 
kombinacja czteroiuymiaroiuej bazy: 

oraz generatoroiu Dq infinitezymalnych transformacji grupy G. 



Przykiad: W przypadku pol cechoiuania grupy G = U{1) pochodna koiuariantna ma postac: 

D^, = {Do,Di) = d^-i-^A^, (4.37) 

gdzie e jest iadunkiem elektronu. Zatem, luproiuadzaj^c pochodnq koiuariantnq do zasad informacyj- 
nych i stosujqc metod^ EFI, otrzymujemy roiunania ruchu, ktore roziuiqzujqc dajq baz^ na znalezio- 
nych (pod)rozmaitosciach przestrzeni statystycznej 5. 



Jest tuiele sposoboiu, na ktore luspoizmiennicza postac pojemnosci informacyjnej / moze bye odczy- 
tana. Ponizej skoncentrujemy si^ na diuoch z nich, jednej dla pol skalarnych rangi N (tzn. A'^-skalaroiu) 
oraz drugiej, dla pol fermionoiuych rangi N. 

Uiuaga o gioiunej lui^zce (mloknistej): Moiuiqc zmi^zle, gloinna mi^zka to taka luiqzka luioknista (okreslona lu Roz- 
dziale 2.2.4), ktorej lulokno jest strukturaln^ grup§ symetrii G. 

Podsumujmy jednak calq dotychczasouj^ informacj^ na temat gloujnej ujiqzki luioknistej precyzyjnie: Maj^c rozmaitosc X 
oraz grup^ Liego G, gioiuna miqzka luioknista E{X, G) jest rozmaitosciq takq, ze: 

1. Grupa G dziala na i5 m sposob rozniczkomalny i bez punktoiu stalych. 

2. Przestrzen bazoma X — E/G, tzn. X jest przestrzeni^ ilorazoiuq E luzgl^dem G, oraz istnieje rozniczkomalne odmzoro- 
manie (nazymane rzutotuaniem) tt : E ^ X. 

3. Dla kazdej mapy {Ui} w atlasie dla X, istnieje rozniczkotualne i odiuracalne odmzoroiuanie : -K^^lUj) Uj x G 
zadane przez E — )■ {Tr{V), /CP)) uj kazdym punkcie P £ E, gdzie / : -K~^{Uj) —5- G speinia tnarunek f{gV) = g f{V), 
dla kazdego g £ G. 

Obraz tt"^, czyli Uj x G, jest nazyiuany mloknem. Zatem kazde mlokno niesie z sob^ kopi§ grupy strukturalnej G. 
Jako, ze baza dla pozostalych pol nie jest jeszcze mybrana. 
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4.3.3.2 Roiunanie ruchu Diraca dla pola sujobodnego rangi N. 

Zgodnie z potuyzszymi roziuazaniami, luspoizmiennicza forma (3.60) pojemnosci informacyjnej z 
pochodnq koujariantnq ma postac: 

„ N/2 3 

I = 4N d^x J^(Z)^V'„)*I)'^^„ . (4.38) 

Zatem jedyna TFI (3.31) dost^pna uj metodzie EFI dla roujnania Kleina-Gordona i kazdego pola typu 
if; rangi N (skalarnego czy fermionoxuego) ma postac: 

K = Kkg = / d'x kKG = AN <f^Y. Y^^D^i^nTD^^n + Q , (4.39) 
gdzie kKG jest g^stosci^ TFI dla roujnania Kleina-Gordona (por. (4.8)). 

Podobnie, ujykorzystujqc (3.51) uj miejsce (3.60) moglibysmy zapisac Kkg dla pola bosonowego, do 
czego poujrocimy jednak pozniej. 

dujie drogi, ktorymi analiza oparta o TFI zadanq przez (4.39) moze podqzac [8, 43]. Pierujsza zujiq- 
zana jest z A^-skalarami a druga z polami Diraca. 

TFI Kleina-Gordona 

Wtedy, gdy rozujazamy pole A^-skalara, to jak ujiemy Q jest roujne Qs zadanemu przez (4.34). 

Fakt ten oznacza, ze TFI dla roujnania ruchu A^-skalara, sprotuadza si§ do postaci Kleina-Gordona, 
tzn.: 

K = Ks = Kkg dla Q = Qs, (4.40) 
a ujariacyjna zasada informacyjna: 

5^^*)Ks = 5^^,){I + Qs) = 0, (4.41) 

zadana przez (3.41), a uj konsekujencji przez (4.14), protuadzi do roujnania Kleina-Gordona dla pola 
skalarnego [8, 16] (patrz (4.56)). 

TFI Diraca 

Jak ujiemy, dla pola Diraca, roujnanie Kleina-Gordona jest otrzymane drogq kujadratury roujna- 
nia Diraca [47]. Zatem, mogioby si^ ujydaujac, ze metoda informacyjna nie ujybiera sama z siebie 
ujlasciujej postaci TFI dla pola fermionoujego. Sytuacja ma si^ jednak zgola inaczej. Przedstaujimy jq 
ponizej [43]. 

Transformacje izometrii /: Zapiszmy (4.38) pol ^p, zaroujno dla iV-skalara jak i pola fermionotuego 
rangi N, uj nast^pujqcej postaci: 

N/2 3 

I = ANY, rf'x {D, ^:(x)) {D. Vn(x)) , (4.42) 
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ktora to postac poziuala zauujazyc, ze jest ona niezmiennicza ze ujzgl^du na transformacje izometrii 
dziaiajqce uj N jl - ujymiaroujej, zespolonej przestrzeni C^/^ pol = (V'n(x)) rangi N . 

Duja typy izometrii /: 

Przypadek skalarouj: W przypadku A^-skalaroiu V' ttuorzqcych podprzestrzen tu C^/^ izometrie te 
transformacjami identycznoscioujymi, pozostaiuiajqc pola i\) niezmienionymi. 

Przypadek pol Diraca: Natomiast dla pol fermionotuych rangi N okreslonych na przestrzeni bazoujej 
X Minkoujskiego, transformacje izometrii tujorzq grup^ Cliff orda Pin{l, 3), b^dqcq podzbiorem alge- 
bry Cliff or da C(l, 3)). Elementy grupy Clifforda Pin{l, 3) dziaiajq w podprzetrzeni C^/^ spinorotu tp. 

Macierze Diraca: Okazuje si^, ze macierze Diraca 7^^, ;U = 0, 1, 2, 3 , (por. (4.48)-(4.50)), ttuorz^ spino- 
roruq reprezentacj^ ortogonalnej bazy uj C(l, 3) i speiniajq tozsamosci: 

r?^^ = l/2{7^7'^}, /i, I. = 0,1, 2, 3, (4.43) 

ktore sq podstatuoujym ziui^zkiem dla iloczynu Clifforda. W przypadku spinorouj rangi N = 8, baza 
UJ Pin{l, 3) jest 2^/^ = 16 ujymiarouja [47]. 



Faktoryzacja Kkg- Dla tryujialnego przypadku A^-skalaroiu, postac (4.39) jest formq podstaiuoujq. 
Jednak uj przypadku spinorouj rangi N, po skorzystaniu z (4.43) uj (4.42), mozna dokonac rozkiadu 
fizycznej informacji Kkg< (4-39), na skiadouje. Postac jarunego rozkiadu Kkg na skladorue i ich fak- 
toryzacja, gdzie kazdy z otrzymanych czynnikouj jest elementem grupy Clifforda Pin (1,3), podai 
Frieden [8]. 



Gioujny rezultat rozkiadu fizycznej informacji Kkg^ z uujzgl^dnieniem pol cechoujania uj pochod- 
nej koujariantnej D^, ktory czyni zadosc "ograniczeniu" Kleina-Gordona (co oznacza, ze luymnozenie 
czynnikouj i dodanie ich daioby na poujrot (4.39)), ma postac: 

„ N/2 3 

K = Kd^4.N d^^Yl Y.{DM*D^i'n + Q , (4.44) 

■^■^ n=lfi=0 

gdzie informacja strukturalna Q jest rotuna: 
r r 

Q = Qd= / d^x EE - 4 iV / (i^x2_^ t;2„ + (^)^'0n V'n + {pozostale czlony) , (4.45) 
Jx Jx 

gdzie jest zgodnie z (3.23) g^stosci^ informacji strukturalnej, a y = 4 ujymiarouje ujektory kolum- 
nouje Vi = {vii,Vi2,Vi3,Vi4)'^, i = 1,2, majq skiadoiue: 

^^in= Mli^o-/3^ + X]^«'^M V'n' , n = l,2,3,4 (4.46) 

n'=l \ 1=1 J nn' 

^2-= Ml^o + /3*^ + J^^a'* AJ C', n=l,2,3,4, (4.47) 

n'=l \ 1=1 / nn' 



oraz 
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gdzie macierze a', / = 1, 2, 3, oraz /3 macierzami Diraca (4.49)^^, a 1 jest 4x4- ujymiaroiuq ma- 
cierzq jednostkoujq. 

Zasady informacyjne dla roujnania Diraca: W koncu, informacyjna zasada strukturalna (3.43) dia 
K = li g^stosci informacji strukturalnej q^, okreslonej zgodnie z (4.45) oraz zasada tuariacyjna (3.44) 
majq postac: 

T'+C + q^ = dla k = 1 oraz S^^,)Kd = + Qd) = . (4.51) 

Poiuyzsze zasady dajq na poziomie obserujoujanym ujarunki (4.13) oraz (4.14) melody EFI, czyli ukiad 
dxxjoch roxunari rozniczkotuych, ktore sq rozruiqzyujane samospojnie. W ruyniku otrzymujemy roru- 
nanie Diraca: 

^3 

) 



/ 3 \ 

vi = IaDq- (3— + ^^o^ iDij = Q , gdzie tp 



(4.52) 



Generacja masy: Zturocmy utuag^, ze w trakcie poiuyzszego rozkiadu Kkg z czionu kinetycznego I, 
(4.42), generoruane sq ruszystkie skiadniki informacji strukturalnej Q, (4.45). W trakcie tej procedury 
czion masoujy generoujany jest poprzez sprz^zenie Fourieroujskie (4.15) pomi^dzy reprezentacjq poio- 
zenioujq i p^dotu^ oraz usrednienie dokonane uj reprezentacji energetyczno-p^doujej, tak jak to miaio 
miejsce dla (4.20). Zatem roujniez masa pola Diracoiuskiego jest przejaiuem istnienia Fourierotuskiego 
samosplqtania pomi^dzy reprezentacjq polozenioiuq a p^dotuq, a caia procedura jest odbiciem: 

i) zaiozenia analitycznosci logarytmu funkcji ujiarygodnosci, 

ii) podzialu na cz^sc Fisheroujskq / oraz (poczqtkoujo nieznanq) cz^sc strukturalnq Q z ujysumouja- 
niem po kanaiach informacyjnych i usrednieniem po przestrzeni proby B opisanym poujyzej (3.12), 
ill) przejscia z pojemnosciq informacyjn^ / do Friedenotuskiej postaci kinematycznej z caikotuaniem 
po zakresie przesuni^c X amplitud rozkiadu ukiadu, opisanym uj Rozdziale 3.3, 

iv) tautologicznego xuygeneroujania, zgodnie z zasadq Macha, informacji strukturalnej Q z informacji 
Fishera /, z uujzgl^dnieniem niezmienniczosci / ze ujzgl^du na transformacj^ amplitud b^dqcq jej 
izometriq oraz transformacj^ Fouriera pomi^dzy reprezentacji poiozenioujq i p^doujq. 

Przedstaujiony schemat generacji masy nie obejmuje ujyznaczenia jej ujartosci. Mouji on raczej o 
tym czego jej pojaujienie si^ jest ujyrazem. 



'^Macierze Diraca 7**, /i = 0, 1, 2, 3 , myst^pujqce in tzm koiuariantnej formic roiunania Diraca: 

(^7"!)^ -m)V' = , (4.48) 

myrazajq si§ poprzez macierze Diraca /? oraz a\ I = 1,2,3, uj sposob nast^pujqcy: 7" = /? oraz 7' — 13a' , (7^ = 
J2v=o Vtii^l'^)- Macierze Diraca a = («^, ,a^) oraz /3 majq postac: 

gdzie a' = ai, [l = 1,2,3) sq macierzami Pauliego, a 1 jest macierzq jednostkoiuq: 



10/ \ i / \ -1 / \ 1 
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Warunek zeroiuania si^ pozostaiych czionow: W roiunaniach (4.46) oraz (4.47) macierz jednost- 
kouja 1, ktora stoi przy Dq oraz ^ y = 4 x 4 ujymiaroiue macierze Diraca /3, ai, jednymi z 
elementouj grupy Cliff orda Pin{l, 3). Jak ujspomnielismy, Frieden [8] przeproiuadzii opisanq decom- 
pozycj^ Kkg< (4.39), do postaci Kd podanej w (4.44). Rotunoczesnie pokazai, ze luyrazenie oznaczone 
uj (4.45) jako "pozostaie cziony' zeruje si^ przy zalozeniu, ze macierze (3 i ai spelniajq relacje al- 
gebry Clijforda. 

Podsumoujanie: Zautuazylismy, ze pojemnosc informacyjna / uj TFI jest zadana przez (4.42) zarotuno 
dla pol A^-skalarotu jak i pol fermionoxuych rangi A'^. Kluczotuq spratuq jest, ze dla kazdego roiuna- 
nia ruchu, okreslona jest tylko jemu charakterystyczna postac q. Zauujazylismy, ze dla iV-skalarouj, 
jedynym czionem, ktory tujorzy caikoiuitq fizycznq informacyjn^ jest Kkg ^ postaci (4.39) bez zad- 
nego ukrytego rozkladu i faktoryzacji, pochodzqcych z nie-Fourieroujskiego splqtania. W przypadku 
roiunania Diraca, informacja fizyczna Kleina-Gordona Kkg^ (4.39), roujniez ujchodzi uj caikoujitq in- 
formacj^ fizyczn^ Diraca Kr,, ale tylko jako jej szczegolna cz^sc (jak to mozna rotuniez zautuazyc z 
poroujnania (4.44), (4.45) oraz (4.39) i (4.34)), spl^tana Fourierotusko ru Kp (4.23). Fakt ten jest blisko 
ztuiqzany z efektem EPR-Bohm'a [48] opisanym uj Rozdziale 5.2.2. 



Postac Q dla rouinania Diraca: Tak uji^c, uj zgodzie z (4.45), szczegoloiua postac Q dla rouinania 
ruchu Diraca okazaia si^ bye inna niz dla A^-skalaroui i mozna jq zapisac nast^pujqco: 

Q = Qd^S,- AN d^^Yl [(^)'C^n] , (4.53) 

■'■^ n=l 

gdzie Sg jest charakterystycznq cz^sciq Diracouiskq dziaiania dla kujadratury rouinania Diraca, ujy- 
znaczonq dla pola Diraca o randze N = 8 przy ujzi^ciu pod uuiag^ uiszystkich symetrii ukladu. 

Caika dziaiania kujadratury rouinania Diraca: Poniexuaz jednak caika dziaiania (por. Rozdziai 4.3.5) 
dla kujadratury specyficznej cz^sci Diracotuskiej zachoxuuje si^ nast^pujqco: 

E>q = - AN / d^x^^ {vin V2n) + {pozostaie cziony) = , (4.54) 

tzn. speinia ujarunek zeroujy, zatem K = Ko redukuje si^ i (uj kujadraturze) okresla postac Kkg dla 
(4.39)13; 



N/2 

K = Kkg = 



■''^ n=l 



3 

fi=0 



(4.57) 



Roiunanie Kleina-Gordona otrzymane z mariacji informacji (4.57) ma postac (V — (d/dx^) , I = 1,2, 3): 



2^2/^ ieA -t ieA , ^,2 , d iecj) 2 ^ , 24 



ri (V -)-{y ^) + r(7rr + ^) V'n +m^c*i/;„ = . (4.55) 

ch cn at h 

Dla pola siBobodnego czteropotencjai cechoinania A^ — {(f>, — A) jest roiuny zeru i ujtedy otrzymujemy: 

^2 

- c h S7 ipn + h tp„ + m c ipn = . (4.56) 
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Uujaga o fundamentalnej roznicy pola skalarnego i pola Diraca: Waznq sprain^ jest zauujazenie, 
ze chociaz postac / dla A^-skalaroiu oraz pol fermionoujych rangi N tuyglqda "poujierzchnioujo" tak 
samo, to jednak ukiady te rozniq si^ istotnie. W samej botuiem rzeczy, podczas gdy N-skalar jest 
rozwiqzaniem rowania ruchu, ktore wyniha jedynie z wariacyjnej zasady informac^^jnej (4.41), 
to pole fermionowe jest samospojnym rozwiqzaniem zasad informacyjnych, zarowno wariacyjnej 
jak i strukturalnej, podanych w (4.51). 

4.3.4 Kohcouje uvuagi o ujkiadzie Q w zasad^ strukturalnq 

Wynik Rozdziaiu 3.1.1 [10] ziuiqzany z ujyproiuadzeniem strukturalnej zasady informacyjnej jest 
ogolny, o ile tyiko, w celu zagujarantotuania siusznosci rozujini^cia w szereg Taylora, funkcja log- 
ujiarygodnosci In P{Q) jest analitycznq funkcjq luektoroujego parametru poiozenia G uj zbiorze jego 
ujartosci V@. Z kolei, ru Rozdziale 3.2 zauruazylizmy, ze model rozuji^zany przez metod^ EFI jest mo- 
delem metrycznym z metrykq Rao-Fisher'a oraz, ze na poziomie caikoiuym, model metryczny jest 
roujnoujazny modelouji analitycznemu. 

Dla ukiadouj, ktore nie posiadajq dodatkoruych uji^zou; rozniczkoujych, ujszystkie poiozeniouje stop- 
nie sruobody sq zujiqzane jedynie poprzez analiz^ modelu metrycznego, tuynikajqcq z rotunan (3.43)- 
(3.44) oraz ujspomnianq zasady Macha, generujqcq czion strukturalny z Fisheroiuskiego czionu kine- 
matycznego, co proruadzi do czynnika efektyiunosci k = 1. Rorunania Kleina-Gordona oraz Diraca 
omaujiane uj Rozdziaiach 4.3.2 oraz 4.3.3 sq modelami tego typu. 

Jesli na ukiad naiozony jest dodatkoujy ujarunek, ktory nie inynika ani ze strukturalnej zasady in- 
formacyjnej (3.43), i'+C + qf = OzK = l, ani z zasady ujariacyjej (3.44), ujtedy ujzrasta zujiqzek 
strukturalny pomi^dzy poiozenioiuymi stopniami sujobody co poiuoduje, ze k tuiqzqca w rotunaniu 
(3.43) g^stosc informacji strukturalnej q z g^stosci^ pojemnosci informacyjnej i', musi malec ponizej 
tuartosci 1. Wiasnosc ta ruynika z ujkl^siosci pojemnosci informacyjnej / przy mieszaniu ukladoru 
[8], ktore pojaujiaja si^ np. na skutek ujproruadzenia dodatkoruego rozniczkoujego rui^zu. Na przykiad, 
omaxuiany uj Dodatku 7.3.1 tuarunek Lorentza dla pola cechotuania Maxujella, ktory jest roujnaniem 
typu roujnania ciqgiosci strumienia, pojaujia si^ nie jako konsektuencja roujnan ruchu badanego pola, 
ale jako ograniczenie szukane na drodze niezaleznej statystycznej estymacji. Najpratudopodobniej ten 
dodatkoujy ujarunek^'^ pojaujia si^ jako rezultat rozujini^cia uj szereg Taylora "goiej" funkcji luia- 
rygodnosci P{Q) [10], podobnie jak ujyproujadzone uj Rozdziale 3.4 rorunanie master (co sygnalizo- 
ujaioby spojnosc caiej statystycznej metody estymacyjnej^^ ). Zatem ujarunek Lorentza naiozony na 
uklad redukuje jego symetri^, co pociqga za sobq pojaujienie si^ zasady strukturalnej i+C + Kq = 0, 
(3.43), z czynnikiem efektyiunosci k mniejszym niz 1. W przypadku rorunan Maxujella omoruionych uj 
Dodatku 7.3.1, zujrocimy uruag^ [43], ze ujartosc k = 1/2 pojatuia si§ automatycznie uj metodzie EFI 
na skutek samospojnego rozujiqzania rorunania strukturalnego, tuariacyjnego i naiozonego ruarunku 
Lorentza. 

4.3.5 Zasada najmniejszego dzialania v.s. zasady informacyjne 

Poujyzsze rozujazania Rozdziaiu 4.3 sq cz^scioujo posiui^cone omoruieniu dodatkoiuego luyniku 
zastosotuania metody EFI, tzn. ustaleniu roznych postaci informacji strukturalnej Q. Zauujazono, ze 

'*Jednak to przypuszczenie nalezy udoujodnic. 

'^Z drugiej strony, same rouinania master lezq m innej cz^sci klasycznej statystycznej estymacji, tzn. m obszarze dzialania 
teorii procesom stochastycznych [34]. 
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przy umiarkoiuanie rozbudoiuanym aparacie metody EFI, nast^puje nie tylko ujyproiuadzenie, tzn. 
estymacja, jej ujynikoujego roiunania ruchu (lub rotunania generujqcego rozkiad), ale jakby przy oka- 
zji, pojatuienie si^ postaci obserujoujanej informacji strukturalnej cf „(g„(x)). 

Konstrukcja calki dziaiania: Z potuyzszego faktu tuynika okreslenie ztuiqzku pomi^dzy caikq dzia- 
lania luraz z zasadq najmniejszego dziaiania, a caikoiuitq informacjq lizycznq turaz z zasadami infor- 
macyjnymi. Okazuje si^ boujiem, ze po ujstaujieniu cf „(g„(x)) z poiurotem do K otrzymujemy caik^ 
dziaiania S modelu [43]: 

S(g„(x),9g„(x)) = J^((7„,(x),ag„(x),cf„(g„(x))). (4.58) 

Sens rotunosci (4.58) okresia ponizsza konstrukcja S(q'„(x), 9g„(x)). Wpieruj rozujiqzujemy zasady 
informacyjne, strukturalnq i ujariacyjnq, znajdujqc obserujoujanq informacji strukturalnq cf „(g„(x)). 
Nast^pnie mozemy otrzymac roujnanie ruchu na duja sposoby: 

(a) Pierujszy sposob analizy: W metodzie EFI ujstaiuiamy otrzymane cf„((7„(x)) od razu do rouj- 
nan Eulera-Lagrange'a wynikajqcych z wariacyjnej zasady informacyjnej z g^stosciq informacji 
fizycznej A;(g„(x), 9g„(x), cf „(,j„(x))). 

(b) Drugi sposob analizy: W drodze do caiki dziaiania teorii pola ujstaujiamy otrzymane cf ,j(g„(x)) 
do K {qn{'x.) , dqni'x.) , cf ^(g„(x))) i stosujqc zasady najmniejszego dziaiania dla tak skonstruoujanego 
S(gn(x), dqni'x.)), otrzymujemy rownania Eulera-Lagrange'a teorii pola. 

Rezultat: Otrzymane w konsekujencji analizy typu (a) lub (b) roujnanie ruchu, bqdz roujnanie ge- 
nerujqce rozkiad^*^, jest uj obu podejsciach takie samo^^. 

Struktura statystyczna teorii: Jednakze, z poujodu definicji S danej przez lewq strong rotunania (4.58), 
pojaujia si^ pytanie, czy metoda EFI, ktora ujykorzystuje K dane przez prawq strong roujnania (4.58), 
daje jakies dodatkouje informacje uj poroujnaniu do zasady najmniejszego dziaiania dla S. Potujier- 
dzajqca odpoujiedz jest nast^pujqca. Wediug Rozdziaiu 4.3 metoda EFI dokonuje (zazujyczaj) rozkiadu 
K na podstaujouje bloki podajqc otujarcie ujszystkie fizyczne i statystyczne poj^cia, i narz^dzia ana- 
lizy. Roujnosc (4.58), ktora j est jedynie definicjq S, ujyraza boujiem jednoczesnie fakt, ze K ma bardziej 
ziozonq struktur^ niz S. 

Poujyzsze stiuierdzenie oznacza, ze S oraz zasada najmniejszego dziaiania niosq zaroujno mniejszq 
fizycznq informacji niz oryginalne zasady informacyjne (uzupeinione fizycznymi uji^zami modelu), 

przypadku luypromadzenia romnania Boltzmanna id Rozdziale 5.1.3, po rozwi^zaniu ukiadu romnari strukturalnego 
(5.24) i Luariacyjnego (5.17), olrzymuje si§ postac (5.30) na <f^ {qn (x)). Jest to postac, ktora po lustaiuieniu do romnania lua- 
riacyjnego (5.17) daje roinnanie generuj^ce (5.34) amplitude g„(x). Zasada luariacyjna (5.14) (gdzie cf ^((/^(x)) luyznaczone 
UJ (5.30) ujyst^puje uj k, (5.15)), dalaby rouiniez roujnanie generuj^ce (5.34). 

Roujnosc (4.58) nalezy uji§c rozumiec nast^puj^co. Znaj^c S((/„(x), dq„{x.)), ktore ujyst^puje po leujej stronie roiunania 
(4.58) jako K ze ujstaujionq, samospojnie iryznaczon^ postaciq cf „ (g„ (x) ) i mariuj^c je dopiero ujtedy ze ujzgl^du na q„ (x) , 
otrzymujemy to samo roiunanie generuj^ce co roziuiqzanie obu zasad strukturalnej i mariacyjnej jednoczesnie. 

'^Natomiast m ogolnosci, nie mozna przyromnac samej zasady ujariacyjnej metody EFI daj^cej roiunanie Eulera- 
Lagrange'a (dla amplitudy qn(x)), m ktorym moze bye umiklana obseriuoiuana informacja strukturalna tf^(g,i(x)), do 
zasady najmniejszego dziaiania §, ktora daje koncotu^ postac roiunania Eulera-Lagrange'a dla g„ (x) bez zadnego, bezpo- 
sredniego sladu postaci tf ^(i7„(x)). 
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jak i nizszq informacj^ o poj^ciach statystycznych . 

Zmniejszenie informacji statystycznej Po otrzymaniu roziuiqzania rotunari informacyjnych i "sci^- 
gni^ciu" ujyniku do S, znikajq z S nie tylko poj^cia informacji Fishera oraz automatycznie pojemnosci 
informacyjnej, lecz i poj^cie caikoujitej meujn^trznej dokiadnosci modelu, tzn. informacji Stama. 

Zmniejszenie informacji fizycznej: W koncu, jesli rzeczyiuistosc (tu znaczeniu matematycznych pod- 
stauj modeloujych) lez^ca poza modelami teorii pola byiaby statystyczna, rutedy odrzucajqc ich ory- 
ginalny zujiqzek z analizq na przestrzeni statystycznej S oraz estymacyjnq metodq EFI, ktora ujybiera 
fizycznie tuiasciiuq (pod)przestrzen S, tracimy romniez oryginalne narz^dzia tej analizy siuzqce do 
konstrukcji dziaiania S. Zamiast tego zadoiualamy siq zgadyiuaniem jego postaci jedynie na podsta- 
ujie fizycznych ujarunkouj ujst^pnych, zastanaujiajqc si^ np. jak szczegolnym jest poj^cie amplitudy 
oraz jak ujyjqtkouja jest zasada nieoznaczonosci Heisenberga. 

Przykiad: Obok uujagi na ujst^pie Rozdziaiu 4.3, ostatnie eksperymenty ze sujiatiem ujydajq si^ mo- 
ujic, ze Fourieroujskie cz^stosci nie sq ujidoczne w optycznej lokalizacji najmniejszych jego impulsom 
W takiej sytuacji zasada Heisenberga dudt > 1/2 mogiaby nie reprezentoxuac sob^ zadnej granicznej 
fizycznej rzeczyujistosci, gdzie oraz 5t sq poprzez transformacj^ Fouriera zujiqzanymi z sobq szero- 
kosciami poioujkoujymi impulsu uj cz^stosci oraz uj czasie. Gdyby eksperymenty te potujierdziiy si^, 
ujtedy zasada Heisenberga straciiaby sujoje oparcie uj transformacji Fouriera dla zmiennych kom- 
plementarnych [44]. Natomiast jest mozliiue, ze znalaziaby ona uJtedy siuoje oparcie uj nierouinosci 
Rao-Cramera, ktora podaje dolne ograniczenie na ujariancj^ estymatora parametru uj przypadku po- 
miaru jednokanaioujego [8] (por. Dodatek 7.1). 
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Rozdzial 5 



Przykiady z fizyki statystycznej i ekonofizyki 
oraz efekt EPR-Bohm'a 

Ogolne statystyczne podstaujy estymacji MNW zostaiy przedstamione w Rozdziaiach 1-2. Nato- 
miast uj Rozdziaiach 3 oraz 4 skryptu przedstaujiono metod^ EFI jako szczegolny typ estymacyjnej 
procedury statystycznej, opracomanej uj ramach teorii pomiaru. Metoda EFI pokazuje w jaki spo- 
sob ujychodzqc z poj^cia funkcji ujiarygodnosci oraz pojemnosci informacyjnej / (por. Rozdziai 3.3) 
otrzymac lui^zy strukturalne tuynikajqce z analitycznej informacyjnej zasady strukturalnej, ktora xuraz 
z ujariacyjnq zasadq informacyjnq oraz rorunaniem ciqgiosci (lub ogolniej, roiunaniem typu master 
por. Rozdziai 2.2.3)), proiuadzi do roujnah rozniczkoujych teorii [8]. W trakcie procedury otrzymujemy 
informacj^ strukturalnq Q opisyujanego ukladu, ktora ujraz z pojemnosciq informacyjnq / truorzy in- 
formacj^ lizycznq ukladu K, b^dqcq statystycznym poprzednikiem calki dzialania (por. Rozdziai 4.3.5). 
Wyproruadzenia roiunah ruchu lub rotunah generujqcych rozklad zasadzajq si^ na potraktotuaniu 
ujszystkich ujarunkouj nalozonych na uklad jako zujiqzkouj na odchylenia (fluktuacje) luartosci po- 
miaroujych od ujartosci oczekiujanych. Przy tym, analizotuane dane pojatuiajq si^ jako efekt pomiaru 
dokonanego przez uklad (por. Rozdziai 2.8). 

Obecny Rozdziai dzieli si^ na druie czQsci, pierujszq majqcq zastosoujanie termodynamiczne oraz 
drugq, opisujqcq zjaiuisko EPR-Bohm'a. Za ujyjqtkiem krotkiej analizy rozujiqzah metody EFI dia rotu- 
nah transportu Boltzmann'a, obie cz^sci Iqczy tuymiar proby = 1. 

5.1 Wyproiradzenie klasycznej fizyki statystycznej z informacji Fishera 

Celem obecnego rozdzialu jest luyproujadzenie metodq EFI podstaujoiuych rozkladou; klasycznej 
fizyki statystycznej. Otrzymamy uji^c roujnania generujqce, z ktorych ujyproujadzone zostanq: rozklad 
Boltzmanna dIa energii, a nast^pnie rozklad Maxujella-Boltzmanna dla p^du. Jako przyklad zastoso- 
luania analizy uj ekonofizyce, podamy przyklad produkcyjnosci branz uj modelu Aoki-Yoshikaujy. 
Przedstaujione rachunki id^ sladem analizy Friedena, Soffera, Plastino i Plastino [8], jednak zostanq 
one ujykonane uj oparciu o luproiuadzonq uj Rozdziale 3.1.1 strukturalnq zasady informacyjnq [10]. 
Roznic^ interpretacyjnq pomi^dzy obu podejsciami podano uj Rozdziale 3.2. 

Dodatkoujo ujyproujadzony zostanie luarunek informacyjny na gorne ograniczenie tempa vuzrostu 
entropii Shannona [8]. 
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5.1.1 Fizyczne sformuloujanie zagadnienia 

Rozmazmy gaz skiadajqcy siQ z M identycznych czqsteczek o masie m zamkni^ty lu zbiorniku. 
Temperatura gazu ma staiq tuartosc T. Ruch czqsteczek jest losotuy i oddziaiujq one ze sobq poprzez 
siiy potencjalne, zderzajqc si^ ze sobq i sciankami naczynia, przy czym zakiadamy, ze to zderzenia 
spr^zyste. Srednia pr^dkosc kazdej czqsteczki jest rotuna zero. 



Oznaczmy przez 6p = y9e,0pj czteroiuektor tuartosci oczekituanej energii oraz p^du czqsteczki, 
gdzie indeks p oznacza p^d. We tuspoirz^dnych kartezjanskich 6p = {9p^ , dp^ , 9p.^). Podobnie jak w 
(3.47) luproiuadzamy zmiennq losoiuq y = (y^^ = -|, y^,^ , przyjmujqcq ujarosci y = (y^ = e/c, y^), 
ktorej skiadoiue spelniajq ztuiqzki: 

ye = -=Oe + Xe, — < Ye < OO (5.1) 

c c 

yp = ^p + xp, yp = (ypi,yp2,yp3) , (5.2) 

gdzie 

Xp = p (5.3) 

oznacza fluktuacj^ p?du, natomiast c oznacza pr^dkosc sujiatia. Zmienne i parametry energetyczne 
ye, Xf oraz 0^ zostaiy ujyrazone ujjednostce ujspoirz^dnych p^doujych energia/c. Parametry 9^ oraz 
9p sq odpoujiednimi ujartosciami oczekituanymi energii (z dokiadnosciq do 1/c) oraz p^du, a x^ oraz 
Xp fluktuacjami ujzgl^dem ujartosci oczekituanych. 



Znajdziemy rozkiad praujdopodobienstuja dia fluktuacji energii przyjmujqcej ujartosci x^ oraz 
fluktualcji p^du Xp przyjmujqcej ujartosci p dla jednej, doujolnej czqsteczki gazu uj doujolnej chujili 
czasu t. Ponieujaz ujartosc t nie musi bye duza, zatem rozujazamy gaz, ktory nie koniecznie jest uj sta- 
nie roujnoujagi. B^dziemy uji^c szukac postaci nieroujnoujagoujego rozkiadu praiudopodobiensttua, 
odpoiuiadaj^cego tak postatuionemu problemouji. 



Utuaga o czterotuektorze energii-p^du: Jednak po pierujsze, ujspoirz^dne czterouiektora fluktuacji 
energii-p^du nie sq statystycznie niezalezne, tzn. nie sq niezaleznymi stopniami sujobody 

ukiadu. Po drugie, jak si^ okaze, speiniajq one zasad^ dyspersyjnq typu (4.20), uji^c nie tujorzq ukiadu 
zmiennych Fishera (poroujnaj (2.223)). Zatem ogolny problem ujymagaiby estymacji odpoujiednich 
roujnari generujqcych dla skomplikoiuanego czasoprzestrzennego zagadnienia, tzn. nalezaioby ujy- 
znaczyc iqczny rozkiad praujdopodobieiistuja ujspoirz^dnych , Xp^ , co ujykracza poza zakres 
skryptu. Niemniej np. uj przypadku relatyujistycznych zjatuisk astrofizycznych, taka estymacja moze 
okazac si^ niezb^dna. 

W skrypcie ograniczymy si^ jedynie do ujyznaczenia brzegoujych rozkiadouj praujdopodobienstuja 
dla X^ (i UJ konsekujencji dla E) oraz dla Xp, co uj nierelatyujistycznej granicy jest uzasadnione. 



5.1.2 Informacja kinetyczna i strukturalna oraz sformuloujanie zasad informacyjnych 

Tak uji^c, statystycznie jedna czqsteczka podlega iqcznemu rozkiadouji praujdopodobieiistuja 
p (xe, Xp), przy czym ujspoirz^dne czterotuektora p^du nie sq niezalezne. Uproszczona analiza skon- 
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centruje si^ na rozkiadach brzegoujych, ktorych analiza ze luzgl^du na luspomniany brak niezalezno- 
sci nie odttuarza analizy iqcznej, chociaz jest siuszna w przyblizeniu nierelatyujistycznym. 
Wyznaczymy uji^c brzegowe amplitude prawdopodobienstwa q (x^) oraz q (x^): 

g„(xe), n=l,...,N^ oraz (xp) , n = l,...,iVp, (5.4) 

a nast^pnie poiurocimy do brzegotuych rozkiadouj praujdopodobienstuja p (x^) oraz p (xp). W koncu 
po tuyznaczeniu p (x^) skorzystamy z (5.1), aby otrzymac ruymagany rozkiad p (e). Podobnie, korzy- 
stajqc z (5.2) otrzymamy po luyznaczeniu p (xp) rozkiad pr^dkosci p (yp), przy czym te drua ostatnie 
roujne ru naszych rozujazaniach, ze ujzgl^du na sredniq ujartosc pr^dkosci cz^steczki 9p = 0. 



Pojemnosc informacyjna dia parametroiu czteroiuektor energii-p^du: Chociaz (x^, Xp) nie jest czte- 
roruektorem uje ujspomnianym uj^ciu Fishera, to jest on czteroujektorem w sensie Lorentza. Korzy- 
stamy uji^c z metryki czasoprzestrzeni Minkoujskiego w postaci {7]ufi) = diag{l, —1, —1, —1) zgodnie 
z (2.214). 

W ogolnym przypadku rozkiadu i^cznego oraz probkoujania czteroiuektora energii i p^du, pojemnosc 
informacyjna ma dla parametru luektoroujego = {{6un)t=o}^^i postac (2.231)^: 



TV 

/= V / dyP{y\e) 



d\nP{y\Q) V ' ( d\nP{y\@) V 

90en J fr[\ d(^P,n ) 



(5.5) 



gdzie y = {y)n=i jest A^-ujymiaroujq prob^, a B przestrzeni^ proby. Zatem pojemnosci informacyjne 
I (0e) oraz / (6^) dla rozkiadou; brzegotuych fluktuacji energii oraz p^du majq postac'^: 



oraz 



7(e,)^-4/ ,5.7) 

•> -^f n=lk=l ^ Pk / 

gdzie minus w (5.5) i uj konsekujencji uj (5.7), mynika zgodnie z Rozdziaiem 2.7.1 z uujzgl^dnienia 
metryki Minkoujskiego (2.214), natomiast X^^ oraz Xp sq zbiorami ujartosci odpomiednio zmiennych 
oraz Xp. Z ponizszych rachunkouj przekonamy si^, ze nieuujzgl^dnienie metryki Minkoujskiego 
(gdy ?7oo = 1 to r]kk = — 1 dla k = 1, 2, 3), doproujadziioby uj konsekujencji uj termodynamicznych 
rozujazaniach do bl^dnego rozkiadu pr^dkosci'^. 



'W zgodzie z ogoln^ miasnosciq kontrakcji indeksu Minkoujskiego dla czteroujektora a; = {xv)i,=o ~ {xo,xi,X2,X3): 

-A df df ^ r df y A / d/ ^ 

W [8] metryka ma postac Euklidesomq, a zmienne majq urojonq mspolrz^dnq przestrzenn^ (a;o, ix), por. Rozdziai 2.7.1. 

^Jak UJ Rozdziale 3.3, indeks n przy ujspolrz^dnej pomini^to, korzystajqc z zaiozenia, ze rozproszenie zmiennej nie zalezy 
od punktu pomiarouiego proby. 

^Odpomiedz na pytanie, czy rozujazania termodynamiczne s^ przyczyn^ metryki Minkoujskiego niezb^dnej ui relatymi- 
stycznej teorii pola, ujykracza poza obszar skryptu. Niemniej autor skryptu uujaza, ze tak si^ istotnie spraujy maj^, tzn. ze 
przestrzen Euklidesoiua z transformacj§ Galileusza sq piermotne mobec przestrzeni Minkoujskiego z transformacj^ Lorentza. 
Stqd podejscie efektyuinej teorii pola Logunova [42] do teorii graujitacji jest blizsze teorii pomiaru fizycznego Friedena-Soffera 
(ktorq jest EFI). Nieco uii^cej na ten temat mozna znalezc uj Dodatku 7.3.2. 
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Zasady informacyjne: Zasady informacyjne, strukturalna (3.43) oraz mariacyjna (3.44) majq poniz- 
szq postac. Dla energii: 

?(G,) + c, + q(e,) = , (/(e e) + Q(e,)) = o , (5.8) 

oraz dla p^du: 

T'iQp) + c^ + Kq{Q^) = , {i{e^) + Q{e^)) = . (5.9) 

G^stosci pojemnosci informacyjnych, i'(0e) oraz i'{Qp), okreslone zgodnie z (3.42) i (3.43), a g^sto- 
sci informacji strukturalnych, q{Qe) oraz q{@^), okreslone zgodnie z (3.23), natomiast Q{&e) oraz 
Q{Q^) sq odpoujiednimi informacjami strukturalnymi. 
W pierujszej kolejnosci rozujazymy problemem (5.8) dla p{e). 

Przypomnienie roli zasad informacyjnych: W rachunkach metody EFI promadz^cych do roujnania 
generujqcego rozkiad, obok zasady ujariacyjnej (3.44) tuykorzystyiuana jest postac (3.43) zmodyfiko- 
ujanej obserruoxuanej zasady strukturalnej. Warto pami^tac, ze zasada (3.43) ujynika z zqdania istnienia 
rozujini^cia Taylora logarytmu funkcji ujiarygodnosci ujokoi pramdziujej martosci parametru (por. 
Rozdziai 3.1.1) oraz z metrycznosci przestrzeni statystycznej S. Natomiast oczekiujana strukturalna 
zasada informacyjna (3.12) jest narz^dziem pomocniczym u; delinicji calkoujitej fizycznej informacji 
K, (3.31), oraz informacyjnej zasady ujariacyjnej (3.44). 

5.1.3 Rozkiad Boltzmanna dla energii 

Ponizej podamy rozujiqzanie zasad informacyjnych (5.8), strukturalnej oraz uiariacyjnej, otrzymu- 
jqc uj pierujszym kroku analizy roiunanie generuj^ce amplitudy dla rozkladu Boltzmanna. 

Zalozmy tust^pnie, ze ruartosc fluktuacji energii Xg zmienia si^ uj petunym zakresie (x™*", x™"^): 

< X, < x™'^^ . (5.10) 

W ten sposob lupieruj uchiuycimy ogolnq zaleznosc amplitudy rozkiadu od x™"^', a nast^pnie doko- 
namy przejscia granicznego, przechodzqc z gornq granicq fluktuacji energii x^"^ do nieskohczonosci. 

Pojemnosc informacyjna ma postac (3.51): 

^tnax 

/(ee)=4 I d^^Y.Ini''^)^ gdzie g;(x,) = ^^^, (5.11) 

gdzie rozkiady prauidopodobiehsttua p„ dla fluktuacji energii sq powiqzane z amplitudami g„ zalez- 
nosciq (2.168): 

Pni^e) = Qni^e) ■ (5.12) 

Informacja strukturalna zgodnie z (3.25) jest nast^pujqca: 

QiQe)= I dx,(/(e,)= I d^^Y.lni^^^'fniQni^e)) . (5.13) 
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Informacyjna zasada irariacyjna uj (5.8) dia pojemnosci informacyjnej /, (5.11), oraz informacji 
strukturalnej Q, (5.13), ma postac: 

6^,^)K = V)(^(0e) + Qm) = I / dx. A; I = , (5.14) 

gdzie A; jest roujne: 

^ / 1 \ 

k = '^^(Qn+jQl{^e)cfM^e))] , (5.15) 
n=l ^ ^ 

zgodnie z ogoinq postaciq g^stosci obseriuoiuanej informacji flzycznej (4.7) dIa amplitud g„. 

Roztuiqzaniem problemu ujariacyjnego (5.14) tuzg^dem g„(xe) jest rownanie Eulera-Lagrange'a 
(4.12): 

:^(f^) = frr-^ dla n = l,2,...,iV , (5.16) 
gdzie 'prim' oznacza pochodnq po x^, tzn. q^i^e) = dQni^e)/dx^. 

Zatem dla rozxnazanego problemu, roiunanie (5.16) dla jak in (5.15), przyjmuje postac: 

„ ^ _ ^(i9«(xe)cf„(gn(xe))) _ d(|g^(x,) (f „(g„.(x,))) 

Zmodyfikoujana obserujoujana zasada strukturalna: Po ruycalkoiuaniu (5.11) przez cz^sci, pojem- 
nosc / ujynosi: 



N 



/(e,) = -4 / dx,Y.qrMq2^e) + C , (5.18) 

r^ = ^ 

gdzie 

C = 4 / dx, (g„ (xj (x,)) = 4 ^ C„ (5.19) 

n=l 



oraz 



a = qn (xr^) (xr^) - g„ (xr") (xr^^) . (5.20) 

Zatem tuidzimy, ze zmodyfikowana obserwowana zasada strukturalna w (5.8) jest ze ujzgl^du na 
(5.18)-(5.19) oraz (5.13), nast^pujqca: 

i -g„(Xe)g^(x,) + Cn + Kjql{y^e) (fnilni^e)) 1=0' (5-21) 
n=l ^ ^ 

gdzie 

Cn = CJi^r" - xr") • (5.22) 
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Zatem na poziomie obsermoiuanym, dla kazdego n = 1, 2, A^, otrzymujemy zasad^ strukturalnq uj 
postaci'*: 

- qn{^e)qn{^e) + C'n + ^^^^(x,) cf „(g„(x,)) = . (5.24) 

Korzystajqc z (5.17) uj (5.24) otrzymujemy: 

2?" -^^ = Kg„(xe)cf„(g„(x,)) + 4C„ . (5.25) 

Ponizej, dla uproszczenia zapisu pominiemy przy rozujiqzyujaniu r6u;nania (5.25) oznaczenie argu- 
mentu x^ uj amplitudzie g„. Zapiszmy (5.25) uj postaci: 

qn K [lql<fniqn)] + Cn 

Rozujiqzujqc poujyzsze roujnanie rozniczkouje otrzymujemy kolejno: 

2 In g„ + = i In (j ql cf + Cn 
i po przeksztaiceniu: 

2Klna^g„ = In (^^g^cf„(g„) + Cr. 
gdzie jest uj ogolnosci zespolonq staiq caikoujania oraz staia = exp(a^/2), skqd: 

<?2(x,) cf = - (alql- - Cn) , (5.27) 



gdzie (uj ogolnosci zespolona) staia a,^ = a^'^'^. Zatem uj rezultacie otrzymalismy obserujoujanq in- 
formacj^ strukturainq, cf „(g„(xe)), jako znanq funkcj^ amplitudy qn{^e)- 

Roujnanie generujqce z k: W koncu, korzystajqc z (5.17) oraz z (5.27), otrzymujemy roujnanie roz- 
niczkouje dla qn{^e)'- 

q'ni^,) = alql^-\^,) . (5.28) 

Podsumoujanie: Wariacyjna oraz strukturalna obserujoujana zasada informacyjna zostaly zapisane 
UJ postaci ukiadu roujnan (5.17) oraz (5.24), ktory rozujiqzujqc, dal uj rezultacie szukanq postac (5.28) 
rownania genemjqcego amplitude g„(xe). Znalezienie postaci tego roujnania byio posrednim celem 
metody EFI. 

Warunek analitycznosci i metrycznosci: Z postaci (5.28) ujidac, ze skoro amplituda gn(xe) jest funk- 
cjq rzeczyujistq, zatem staia musi bye rzeczyujista. Rozujiqzanie roujnania (5.28) znajdziemy tutedy, 
gdy ujspoiczynnik efektyiunosci ujynosi: 

K = l , (5.29) 



*Gdyby nie mycalkomac uj (5.18) I przez cz^sci, mtedy z (3.40) i po skorzystaniu z postaci kinematycznej pojemnosci, 
zasada strukturalna na poziomie obserujouianym miaiaby postac: 

q'Jix,) + Jg^(xO cF„(g„(xO) = . (5.23) 
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czyli dla przypadku, gdy zasada stmkturalna dla ukiadu jest konsektuencj^ analitycznosci logarytmu 

funkcji ujiarygodnosci (3.1) oraz metrycznosci przestrzeni statystycznej S. 

W przypadku k = 1 obserujoujana informacja stmkturalna (5.27) przyjmuje prostq postac: 

g2(x,) cf „(g„,(x,)) = 4(a2g2(x,) - C^) , (5.30) 

a caikouia postac 5/ jest nast^pujqca: 

r N N 

n=l n=l 

CO po skorzystaniu z unormoiuania kujadratu amplitudy: 

J dxe ql (x,) = J dx^pn (x,) = 1 , (5.32) 

daje: 

N N 

Q(e,) = AY,{al-Cn)=4j2o^l-C . (5.33) 

n=l n=l 

TV 

W ostatnim przejsciu uj (5.33) skorzystano z postaci staiej C = A ^ Cn ujproujadzonej uj (5.18). 

n=l 

Roujnanie generujqce: Dla rozujazanego przypadku k = I, rotunanie generujqce (5.28) ma postac: 

Qni^e) = alqni^e) ■ (5.34) 

Spraujdzenie rachunkouj: Wstaujiajqc (5.34) do (5.18), otrzymujemy nast^pujqcq postac pojemnosci 
informacyjnej: 

N 

I{e,) = -A^al + C , (5.35) 

n=l 

CO ujraz z (5.33) oznacza spraujdzenie popraujnosci rachunku, poprzez speinienie przez otrzymane 
rozujiqzanie oczekiujanego strukturalnego ujarunku I + Q = 0, zgodnie z (3.45). 

Rozujiqzanie roiunania generujqcego: Kolejnym etapem analizy jest roziui^zanie roumania gene- 
rujqcego (5.34). 

Najogolniejsza postac amplitudy (?n(xe) b^dqcej rozujiqzaniem rotunania (5.34) jest przy ujarunku 
X™" < Xe < x™"^', jak UJ (5.10), nast^pujqca: 

Qni^e) = Bn exp (a„x,) + D„ exp (-a„x,) , x™" <x< x^""^ , S„, L>„ = const. (5.36) 

Poniexuaz staia jest rzeczytuista, zatem ujproiuadzaj^c noujq rzeczyujistq stalq /3„, mozna an przed- 
staujic jako a„ = /3„ i ujtedy roztuiqzanie (5.36) ma charakter czysto eksponencjalny: 

(?„(x,) = Bn exp (/3nXe) + Dn exp (-/?nX,) , (5.37) 

bqdz jako a„ = i/3„, i ujtedy rozuji^zanie (5.36) ma charakter czysto trygonometryczny: 

g'„(x,) = Bn exp (i/3„Xe) + Dn exp (-z/3„Xe) . (5.38) 
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Warunek normalizacji dla amplitud: Tak okreslone funkcje muszq bye dopuszczalne jako amplitudy 
praiudopodobienstuja, zatem muszq speiniac warunek normalizacji dla g^stosci praiudopodobien- 
stuja (5.32). 

Zaiozmy, ze martosc fluktuacji energii nie jest ograniczona od gory, co zrealizujemy jako dqzenie 
^max nieskonczonosci. Jednak kiuadrat funkcji trygonometrycznej nie moze bye unormoujany do 
jednosei dla x^"^ — )• oo, zatem funkcja trygonometryezna (5.38) nie jest dopuszczalnym roztuiqza- 
niem. 

Pozostaje uji^c roziuiqzanie eksponencjalne (5.37). Ponieujaz jednak marunek unormotuania (5.32) 
ma bye zadany na przedziale otujartym x^*" < x^ < oo, zatem cz^sc rozmiqzania z dodatniq eks- 
ponent^ musi bye odrzucona ze mzgl^du na jej rozbieznosc do nieskoiiczonosci. Skqd otrzymujemy 
zqdanie, ze dla /3„ > staia Bn = 0. 

Podsumoujujqc, szukana postac amplitudy jest mi^c nast^pujqca: 

qn (x,) = Dn exp (-/3„ X,) , /3„ G R+ , x™" < x, < oo . (5.39) 
Z poujyzszego i z luarunku normalizacji (5.32) dx^ q^ (x^) = 1, myznaczamy stalq Dn, otrzymu- 

n„ = 72^exp(/3„xr") . (5.40) 



Ostateczna postac amplitudy: Roztuiqzanie to zostaio otrzymane dla przypadku /3„ = a„ G R+, 
zatem ostatecznq postaciq (5.36) jest: 

qn (xe) = V2^exp [an (x^^" - Xe)] , a„ G R+ . (5.41) 

Zaumazmy, ze a„ jest tu jednostkach [c/energia]. 

Koricoma postac pojemnosci informacyjnej: W koncu mozemy ujyznaczyc pojemnosc informacyjnq. 
Wstaujiajqc (5.41) do (5.11), otrzymujemy: 

N 

/(G,) = 4^q2 >0, a„GR+, (5.42) 

n=l 

CO po porotunaniu z (5.35) daje martosc stalej C vownq: 

N 

C = 8Y,c^l- (5.43) 

n=l 

Uujaga o stabilnosci rozuiiqzania: Warunek dodatniosci pojemnosci informacyjnej otrzymany uj 
(5.42), dla pojemnosci informacyjnej zmiqzanej z dodatniq cz^sciq sygnatury metryki Minkomskiego, 
jest istotnym mynikiem z punktu midzenia teorii pomiaru. W rozmazanym przykiadzie analizy esty- 
macyjnej martosci oczekimanej energii czqstki gazu, zostai on otrzymany na gruncie samospojnego 
rozmiqzania roujnan rozniczkoujych [49] informacyjnej obserujomanej zasady strukturalnej oraz za- 
sady ujariacyjnej. Niespeinienie tego marunku oznacza niestabilnosc badanego ukiadu. 



Z kolei, ujstatuiajqc otrzymanq martosc stalej C do (5.33) otrzymujemy: 

N 

Q(e,) = -4^a2 <0. (5.44) 



n=l 
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Natomiast sam problem ujariacyjny (5.14), ktory mozna tuyrazic po skorzystaniu z postaci Q{Qe) 
(5.33) Lu postaci: 

^/(e,) + AY,al-C^=0, (5.45) 
jest ze sujojej natury nieczuiy na ujartosc staiej C. 

Uujaga o randze amplitudy N: Istotnym zagadnieniem metody EFI jest mielkosc proby N pobra- 
nej przez ukiad, tzn. ranga N amplitudy. Do spraujy liczby amplitud qn ujchodzqcych w opis ukiadu 
podejdziemy uj najprostszy z mozliujych sposoboiu, sugerujqc stosoujanie dtuoch prostych i nieujy- 
kluczajqcych si^ kryteriouj: 

(1) Kryterium minimalizacji / ze luzgl^du na rang^ amplitudy N [8]. Tzn. przy zachoujaniu tua- 
runku / > 0, (2.225), ranga N moze na tyle spasc, zeby istnialo jeszcze samospojne rozujiqzanie 
roujnan czqstkoujych strukturalnej i ujariacyjnej zasady informacyjnej. 

Kryterium to nie oznacza nie realizoujania rozujiqzan z tui^kszq niz minimalna liczbq N. 

(2) Kryterium obserujacyjne ujyboru rangi amplitudy ujiqze si^ z ujyborem takiej ujartosci N, dla 
ktorej otrzymane rozujiqzanie ma realizacj^ obsertuotuanq uj eksperymencie. We ujspoiczesnych teo- 
riach lizyki statystycznej oraz teoriach pola, realizoujane sq rozujiqzania z niskimi ujartosciami rangi. 
Fakt ten zauujazylismy juz uj Rozdziale 4 dla modeli teorii pola. 



Rozujazany uj biezqcym rozdziale przykiad rozkiadu energii pozujala na ilustracj^ kryterium (1). W 
kolejnym z rozdziaiouj znajdziemy roztuiqzanie EFI dla rozkiadu pr^dkosci czqsteczki gazu, stosujqc 
roujniez kryterium (1). Obok stacjonarnego rozujiqzania Maxujella-Boltzmanna z = 1, ujskazemy 
na fizycznq interpretacj^ rozujiqzan z > 1. 

Zastosoujanie kryterium (1) dla rozkiadu energii: Zauujazmy, ze ponietuaz ujszystkie a„ uj (5.42) s^ 
rzeczyujiste, zatem, przy zalozeniu braku ujplyuju noujych stopni sujobody na poprzednie, pojem- 
nosc informacyjna / ujzrasta ujraz ze ujzrostem N. Zgodnie z kryterium (1), przyjmijmy dla roziuaza- 
nego przypadku rozkiadu fluktuacji energii, ze: 

N = 1 . (5.46) 

Jedyny ujspoiczynnik ai oznaczmy teraz a, natomiast parametr = {9ei) = Be- 
Zatem z (5.41) mamy amplitudy: 

g (xe) = V2^exp [a (x™" - x,)] , (5.47) 

ktorej odpoujiada rozkiad g^stosci praujdopodobienstuja fluktuacji energii x,.: 

p (xj = g2 (xj = 2a exp [2a (x™" - x^)] , a G R+ . (5.48) 

Rozkiad g^stosci prairdopodobienstuja energii e czqsteczki jest koricotuym punktem analizy obec- 
nego rozdziaiu. Ponieujaz zgodnie z (5.1) mamy: 

ye = - = 0e + x, , -<ye<oo, dla x™"<x, <oo, (5.49) 
c c 

gdzie eo/c = 9e + x™". Zatem de/dxe = c, skqd rozkiad dla zmiennej e ma postac: 

1 a 

p(e) =p(x,) — — — r = 2-exp [-2a (e - eo) /c] , eq < e < oo . (5.50) 
|ae/aX(;| c 
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Pozostaio jeszcze okreslenie staiej a. Ponieujaz ujartosc oczekituana energii tuynosi: 

+00 

{E) = ce,= J dep{€)e, (5.51) 

uji^c ujstatuiajqc (5.50) do (5.51) otrzymuje si^: 

2a = c{{E) -eoy^ . (5.52) 

Zturocmy utuag^, ze z (5.51) luynika po pierujsze, ze E jest estymatotem ujartosci oczekiiuanej {E) 
energii czqstki: 

{E) = E , (5.53) 
a po drugie, ze jest on nieobciqzony. 

Szukany rozkiad g^stosci praiudopodobieristuja energii czqstki ma zatem postac: 

p(e) = l ^^^^ " ""^"^ " /^^^^ " "^^^ ' - '° , (5.54) 

1 dla e < eo ' 

gdzie uj drugiej linii po praujej stronie zaznaczono fakt nie ujyst^poujania czqstek z energiq mniejszq 
niz eQ. Rozkiad (5.54) jest koncoujym rezultatem metody EFI. Jego postac daje zasadniczo rozkiad 
Boltzmanna dla energii czqsteczki uj gazie. 

Rozkiad Boltzmanna dla energii czqsteczki: Aby domknqc temat od strony flzycznej zauiuazmy, 
ze energia caikoruita czqsteczki ujynosi e = ekin + V, gdzie ekin jest energi^ kinetycznq czqsteczki a 
V jej energiq potencjalnq. Do potencjaiu V mozemy dodac petunq staiq np. eo, nie zmieniajqc przy 
tym lizycznego opisu zjaujiska, zatem po przesuni^ciu e o eo otrzymujemy: 

eo = oraz e > . (5.55) 

Z kolei, dla czqstki gazu poruszajqcej si^ bez obrotu, twierdzenie o ekwipartycji energii mouji, ze: 

{E) = -^, (5.56) 

gdzie T jest tempetaturq bezoizgl^dnq gazu. Wstauiiajqc (5.55) uiraz z (5.56) do (5.54) otrzymujemy: 

p (e) = (3A;r/2)^ie-2^/3fcT ^ ^ > q ^ (5 57^ 

czyli ujiasciujq postac rozkiadu Boltzmnna dla energii czqsteczki uj gazie o temperaturze T. 

Informacja Fishera dla 9e i DORC dla estymatora (E): W przypadku = 1 oraz skalarnego para- 
metru 9^, pojemnosc informacyjna (5.42) jest rotuna informacji Fishera Ip dla tego parametru. Gdy 
dolne ograniczenie na energi^ czqstki ujynosi eo = 0, otrzymujemy po skorzystaniu z (5.52) oraz (5.44) 
nast^pujqcy zuji^zek: 

\2 



iFiOe) = I{Oe) = -QiOe) = = > . (5.58) 

\E) 
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Z Rozdziaiu 2.8.1 tuiemy, ze estymacja poujyzszego parametru oczekiujanego 9^, dualnego do 2a, 
dla standardoujego rozkiadu eksponentialnego, a takim jest rozkiad Boltzmanna, speinia DORC uj 
Tujierdzeniu Rao-Cramera. Zatem tuariancja estymatora tego parametru iuynosi: 

sk^d otrzymujemy tuariancja estymatora (5.53) sredniej energii czqstki, roiunq: 

a' ((i)) = {Ef . (5.60) 
Na tym konczymy analiz^ metody EFI dla rozkiadu Boltzmanna. 

Uujaga o roujnoujadze statystycznej uj metodzie EFI: Biorqc pod uujag^ ograniczenia narzucone na 
normalizacj^ (5.32) i skonczonosc ujartosci oczekiujanej (5.51) rozkiadu, metoda EFI ujyznacza rozkiad 
przy narzuceniu zasad informacyjnych. Poprzez obserujoujanq zasad^ strukturalnq dokonuje ona, dla 
giadkiej funkcji ujiarygodnosci, separacji czionu estymacyjnego dla parametru 6^ ziuiqzanego z g^- 
stosciq pojemnosci i, ktorej caika / jest sladem po metryce Rao-Fishera przestrzeni statystycznej S, 
od czionu strukturalnego q. Jest to ujyrazem zasady Macha. Natomiast poprzez zasad^ ujariacyjnq, 
metoda EFI dokonuje stabilizacji rozujiqzania, ujybierajqc najmniejszq odlegiosc (liczonq ujzdiuz geo- 
dezyjnej uj przestrzeni statystycznej S) ujyestymoujanego stanu ukiadu od stanu zaobserujoujanego. 
Geometria S zalezy od pojemnosci kanaiu informacyjnego / ujyliczonej z uujzgl^dnieniem jej zalez- 
nosci od informacji strukturalnej Q. 



Uujaga: W zujiqzku z poiuyzszym oraz poprzednio podanym kryterium (1) doboru rangi amplitudy 
N poprzez minimalizacj^ /, pojaujia si^ nast^pujqce, ogolne spojrzenie na estymacyjny charakter me- 
tody EFI. 

Estymacja metodq EFI oznacza ujybor rotunaii generujqcych rozkiad (lub roujnan ruchu) na skutek 
dziaiania dujoch czynnikouj. Pierujszy z nich ujymaga, po pierujsze ujzrostu informacji o ukiadzie 
zaujartej uj g^stosci pojemnosci informacyjnej i okreslonej uj (3.42) oraz (3.43), ale tylko na tyle na ile 
ujymaga tego, zaujarta uj zasadzie strukturalnej i'+C + nq = 0, (3.43), struktura ukiadu opisana g^sto- 
sciq informacji strukturalnej q, (3.23), przy, po drugie jednoczesnej minimalizacji caikoujitej fizycznej 
informacji K = I + Q, (3.31). Oszacoujanie poszukiujanego roujnania nast^puje uji^c na skutek zqda- 
nia samospojnosci rozujiqzania duJOch rozniczkoujych zasad informacyjnych, (3.43) oraz (3.44). 
Natomiast oczekiujana zasada strukturalna I + kQ = 0, (3.33), jest uj mysl zujiqzku (3.45) drugim, 
metrycznym czynnikiem, domykajqcym poujyzszq rozniczkoujq analiz^ statystycznq doboru modelu. 
Dzieli ona modele statystyczne na dujie grupy: modele metryczne, roujnoujazne zgodnie z (3.45) mo- 
delouji analitycznemu z metrykq Rao-Fishera oraz modele, ktore nie speiniajq zasady (3.45), czyli 
nieroujnoujazne modelouji z metrykq Rao-Fishera. 



Zujiqzek EFI oraz ME dla standardoujego rozkiadu eksponentialnego: Poprzednio otrzymalismy 
rozkiad Boltzmanna (2.258) jako szczegolny przypadek rozujiqzania zasady maksymalnej entropii 
(ME), realizoujany uj sytuacji ujarunku normalizacji oraz istnienia jedego parametru obserujoujanego, 
ktorym jest srednia ujartosc energii czqstki. Szczegolna postac standardoujego rozkiadu eksponential- 
nego oraz te same luarunki brzegouje sq przyczynq otrzymania tego samego rozujiqzania uj metodzie 
EFI oraz ME. W ogolnosci metoda EFI ujykracza poza caiq klas^ modeli eksponentialnych metody 
ME. 
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5.1.4 Model Aoki-Yoshikaujy dla produkcyjnosci branz 



Model Aoki i Yoshikaujy (AYM) zostai opracoiuany uj celu opisu produkcyjnosci branz kraju 
[50, 51]. Rozujazmy g ekonomicznych sektorouj. Sektor i-ty jest scharakteryzoujany przez czynnik 
wielkosci produkcji rii, tzn. liczebnosc, oraz zmiennq poziomu produkcyjnosci A, tzn. ujydajnosc 
jednostkoujq, przyjmujqcq luartosci Oj. 

Niech liczebnosc rij b^dzie liczbq aktywnych pracoujnikouj uj i-tym sektorze, co oznacza, ze praca 
(robocizna) jest jedynym czynnikiem produkcyjnym. Zmiennq losoujq uj AYM jest poziom produkcyj- 
nosci A, ktorej rozkiad jest okreslony poprzez par^ (a,, n^), i = 1, 2..., 5. 

Unormoujanie jako pierujszy ujarunek modelu: Zaiozmy, ze catkowity zasob czynnika wielkosci 
produkcji, tzn. liczba dost^pnych pracoujnikouj, jest uj ekonomii zadany jako ujielkosc egzogeniczna, 
czyli nie kontrolotuana od ujeujnqtrz lecz zadana z zeiunatrz. Niech jego ujielkosc jest roujna n, co 
traktujemy jako pierwsze ograniczenie w modelu, tak, ze zachodzi: 

9 

rii = n . (5.61) 

i=l 



Sektory. Uporzqdkujmy ujielkosc produkcyjnosci a, uj sektorach od najmniejszej do najuji^kszej: 

oi < a2 < ... < ag . (5.62) 

Ponieujaz a, jest poziomem produkcyjnosci i-tego sektora, zatem uzysk (tuartosc produkcji) uj i-tym 
sektorze ujynosi: 

Zi = aiUi . (5.63) 

Zatem caikoujity uzysk z w ekonomii kraju ujynosi: 

9 9 

z = ^ = ^ rij . (5.64) 

1=1 i=l 

Drugi ujarunek modelu: Wiekosc z jest interpretotuana jako produkt krajowy brutto (PKB). 
Zaiozeniem AYM dla ujartosci PKB jest ustalenie ujartosci z poprzez egzogenicznie zadany agregatotuy 
popyt D (demand), tzn.: 

z = D . (5.65) 

Zatem drugie ograniczenie w modelu ma postac: 

9 

UiUi = D . (5.66) 

i=l 

Celem melody EFI dla modelu AYM jest, po pierujsze ujyznaczenie rotunania generujqcego, a po 
drugie, teoretycznego rozkiadu liczebnosci dla zmiennej poziomu produkcyjnosci A, tzn. okreslenie 
ujektora obsadzen: 

n = (ni,n2, .■.,ng) . (5.67) 

Poroujnanie analizy dla AYM oraz rozkiadu Boltzmanna: Rozujazane zagadnienie jest odpoujied- 
nikiem poprzedniego zagadnienia zujiqzanego z okresleniem rozkiadu praujdopodobienstuja energii 
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czqstki gazu. Mozna je okreslic jako zagadnienie rozmieszczenia n czqstek gazu na g poziomach ener- 
getycznych uj marunkach roujnoujagi statystycznej, uj taki sposob, ze zachomane sq, liczba cz^stek: 

9 

^ni = n (5.68) 

1=1 

oraz caikomita energia gazu £: 

y^eini = £ lub {E) = S2-ei = - . (5.69) 

1=1 1=1 

Zatem poziom produkcyjnosci Oj jest analogiem poziomu energetycznego ej, natomiast ograniczenie, 
ktore dai uj AYM popyt D jest analogiem ograniczenia pochodz^cego od martosci caikoujitej energii 
£ gazu. 

Dokonajmy nast^pujqcego przyporzqdkoujania pomi^dzy ujielkosciami opisujqcymi rozkiad energii 
cz^stki gazu oraz rozkiad poziomu produkcyjnosci. Po leujej stronie przyporzqdkoujania "-f-)^" jest ujiel- 
kosc dla energii czqstki, po praujej dla produkcyjnosci pracoujnika. Strzaiki — >• uj naujiasach oznaczaj^ 
przejscie od ciqglego do dyskretnego rozkiadu zmiennej (lub na odujrot). 

Zatem, zmiennej energii cz^stki E odpotuiada poziom produkcyjnosci pracoujnika A: 

E = {e^ Ei) ^ A = {tti^ a) . (5.70) 

Rozkiadouji praujdopodobienstuja zmiennej energii czqstki p{e) odpoujiada rozkiad poziomouj pro- 
dukcyjnosci pracoujnika p{a): 

[pie) ^ p,^ = ^) o = ^ ^ pia)) . (5.71) 

Normalizacje rozkiadouj sq sobie przyporzqdkoujane nast^pujqco: 

dep{e) = 1 ^ Y.p,^ = 1^ o (J2p^ = ly '^"^'(") = ■ (^-^2) 

Wartosci oczekiujanej energii czqstki odpotuiada ujartosc oczekiujana luartosc produkcyjnosci pra- 
coujnika: 



przy czym uj AYM ujartosc oczekiujana produkcyjnosci jest zadana jako: 

(.4) = D/n. (5.74) 

Okreslenie zmiennej addytyujnych fluktuacji: Aby analiza uj AYM mogia przebiegac dokiadnie tak 
samo jak dla rozkiadu Boltzmanna, musimy dokonac jeszcze jednego przejscia po stronie produkcyj- 
nosci, a mianoujicie przejsc od poziomu produkcyjnosci A do jej fluktuacji Xa od tuartosci oczekiuja- 
nej {A), tzn. dokonac addytyujnego rozkiadu: Ya = A = {A) + Xa- 
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OdpoLuiedni analog pomi^dzy lluktuacjami energii i produkcyjnosci ma uji^c nast^pujqcq postac: Dla 
energii czqstki zachodzi (5.1): 

ye = -=0e + X, , ^<ye<00, X^" < X, < OO , (5.75) 

c c 

gdzie skorzystano z zaiozenia o nieograniczonosci od gory fluktuacji energii (por. (5.39) luraz z dyskusjq 
zaujart^ poujyzej), natomiast dla produkcyjnosci pracomnika zachodzi: 

ya = a = 6*^ + Xa , Oo < Ya < oo , X™" = ao - 6*^ < Xa < oo . (5.76) 



Rotunanie generujqce amplitude produkcyjnosci: Mozemy teraz przeniesc poujyzszq analiz^ EFI dla 
rozkiadu Boltzmanna na grunt modelu AYM. Zatem ujychodzqc z zasady ujariacyjnej (5.14) oraz struk- 
turalnej (5.21) i odpotuiednich analogouj pojemnosci informacyjnej (5.11) oraz informacji struktural- 
nej (5.13), otrzymujemy zgodnie z analizq Rozdziahi 5.1.3 roujnanie generujqce rozkiad produkcyjnosci 
(5.34), ktore dla ujielkosci proby = 1 ma postac: 

r 2 = a 9(xa) , (5.77) 
aXgj 

gdzie g'(xa) jest amplitude rozkiadu fluktuacji produkcyjosci, a a rzeczytuistq staiq. 

Rachunki analogiczne do przeproujadzonych pomi^dzy (5.34) a (5.54), z ujarunkiem normalizacji (5.72), 
ktore poprzednio doproujadziiy do amplitudy (5.47) rangi = 1, dajq nastepujqce rozujiqzanie rouj- 
nania (5.77) na amplitude fluktuacji produkcyjnosci Xa w zakresie (5.76): 



(D/n) -ao + Xa 



dla x7" = ao - Oa < Xa < oo (5.78) 



2 D/n 

oraz uj analogii do (5.54), rozkiad g^stosci produkcyjnosci A: 

p (a) = ( (- dla a>ao ^ ^^^^^ 

[ dla a < flQ 

gdzie UJ drugiej linii po praujej stronie zaznaczono fakt nie ujyst^poujania produkcyjnosci mniejszej 
niz aQ. Rozkiad (5.79) jest koncoujym rezultatem metody EFI dla modelu AYM produkcyjnosci. 

Poroujnanie ujynikouj metody AYM oraz EFI: Aby postac rozkiadu (5.79) oddaia u; peini ujynik 

Aoki i Yoshikaujy^, nalezy poujrocic do dyskretyzacji ujartosci a — )■ zmiennej A. 

Rozujiqzali oni poujyzszy problem stosujqc metody mnoznikouj Lagrange'a z luarunkami ograniczajq- 

cymi (5.61) oraz (5.66). Nast^pnie zaiozyli [50], ze ujartosci produkcyjnosci sq dyskretne, tujorz^c ci^g 

arytmetyczny: 

Qi = i gdzie i = 1, 2, 5 , (5.80) 
gdzie flQ jest najmniejszq produkcyjnosci^. 



^Omoujienie metody Aoki i Yoshikaujy zamieszczono na koncu obecnego rozdzialu. 
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Wzgl^dny popyt agregatoujy r: W koncu, przy zaiozeniach, po pierujsze, ze liczba dost^pnych sek- 
torouj produkcyjnosci jest bardzo duza, tzn. g » 1 oraz po drugie, ze: 

r=^, (5.81) 

Oo 

tzn. agregatowy popyt przypadajqcy na jednego pracownika D/n odniesiony do najmniejszej pro- 
duhcyjnosc ao, jest bardzo duzy, Aoki i Yoshikaujy otrzymali mynik [50, 51]: 

P(^|„*) = !!lp, J-Z'll^y «(1 + J_)e-^ i = l,2,... , r»l, (5.82) 
n r — \ \ r J r 

gdzie n*, i = l,2,...,g, sq luspoirz^dnymi ni Luektora obsadzen (5.67), przy ktorych praiudopodo- 
bienstiuo pojaiuienia si^ tego mektora obsadzen jest maksymalne. 

Wynik analizy metodq AYM: Rezultat (5.82) podaje prawdopodobienstwo, ze losowo wybrany pra- 
cownih jest w i-tym sektorze produkcyjnosci, o He gospodarka znajduje si? w stanie okreslonym 
wektorem obsadzen n* = (n^, rig, n*). 

Przejscie do rozkiadu dyskretnego dla ujyniku EFI: Aby poroujnac ujynik (5.82) otrzymany uj AYM 
z ujynikiem (5.79) otrzymanym w metodzie EFI, przejdzmy uj (5.79) do rozkiadu dyskretnego. W tym 
celu musimy ujycaikoujac ujynik EFI uj przedziale (aj, aj+i), przy czym od razu zaiozymy, ze zachodzi 
tti = i ao, (5.80). W rezultacie otrzymujemy^: 

/•{i+l)ao . , 

P(i)= / dap(a) = (l-e"i/(''"iMe-(^-i)/('^-^) dla i = l,2,.... (5.84) 

Poroujnanie modeli dla oq = 0. Niech jest staiq szerokosciq sektorouj produkcyjnosci. Wtedy, uj 
przypadku gdy ao = 0, ujzor (5.54) metody EFI proujadzi uj miejsce (5.84) do rozkiadu: 

P{i)= dap(a) = + e-*/^ i = l,2,... dla ao = , (5.85) 

J{i-l)Sa ^ ' 

gdzie zamiast (5.81) ujproujadzilismy: 

jako agregatowy popyt przypadajqcy na jednego pracownika D jn odniesiony do szerokosci sektora 
produkcyjnosc 5a. W granicy f >> 1 z (5.85) otrzymujemy: 

« ( ^ + -4^ ) i = l,2,... , dla ao = 0, (5.87) 



* Przyjmujqc, ze r >> 1, otrzymujemy, in podanych granicach, nast^puj^cy rozkiad pramdopodobienstuja produkcyj- 
nosci pracoumika: 

P(i) « (i + -!-)( e~- + i I dla j = l,2,... oraz ao > , r»l. (5.83) 

r 2r^ V T J 
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Wniosek z poroujnania ujynikouj metody AYM oraz EFI: W granicy duzych f oba ujyniki si^ scho- 
dzq. Jednakze granicy najmniejszej produkcyjnosci cq metoda EFI ujmuje inaczej niz AYM. To znaczy, 
formula EFI (5.87) daje dla ao = innq kxnadratoxu^ popraujk^ in f niz rezultat (5.82) modelu AYM 
dia r = f oraz oq — s- 0. 



Uujaga: Ponadto ruynik (5.85) jest dokiadny, natomiast uj AYM dyskretyzacja poziomu produktyru- 
nosci jest tylko ruybiegiem technicznym, gdyz zmienna ta jest z natury ciqgia, do czego i tak uj koncu 
odujohije si^ metoda AYM przy tuyznaczaniu mnoznikoin Lagrange'a, przechodzqc z poinodoir ra- 
chunkoujych uj (5.61) oraz (5.66) z g do nieskonczonosci. 



Uzupelnienie: Analiza Aoki i Yoshihawy dla produkcyjnosci. Podajmy sposob myproujadzenia rozkladu 
Luektora obsadzen m AYM metodq czynnikouj Lagrange'a [51]. Wpromadzmg mektor H*^") indywidualnych 
przypisan, posiadaj^cy tyle skladomych ilu jest pracoujnikouj uj calej gospodarce kraju: 

H'"' = (i/i,i72,...,i/„) =h = (/ii,/i2,...,/i„) . (5.88) 

Kazda ze mspolrz^dnych Hi, i = 1,2, n, moze przyjmoujac luartosci hi = s, gdzie s e {1,2, ...,5}, co ozna- 
cza, ze i-ty pracoinnik jest aktymny uj s-tym sektorze gospodarki. Zatem ujektor h podaje jednq konfiguracj^ 
indyujidualnych przypisan. Jesli ustalimy mektor obsadzen n, (5.67), to liczba W roznych h (indyujidualnych 
konfiguracji przypisan), realizujqcych ten sam ustalony ujektor obsadzen n, ujynosi [52]: 



W^(H|n) 



n: 



(5.89) 



=1 ' 



Bokzman zauujazyi, ze gdy uklad znajduje siq iv roujnoujadze statystycznej to, prauidopodobienstujo 7r(n), ze 
znajduje si^ on uj stanie o okreslonym mektorze obsadzeri n (tzn. ze pojaujil si^ taki ujlasnie ruektor obsadzen), 
jest proporcjonalne do liczby jego mozliujych realizacji, tzn. do iy(H|n). Zatem: 



7r(n) = M^(H|n) P(H|n) 



p 



-.1 



(5.90) 



gdzie JC jest ujiasciujq normalizacyjnq staiq, a p jest prawdopodobienstwem zaj^cia przez j-tego pracouinika 
okreslonego s-tego sektora obsadzen, More zostalo przyjqte jako takie samo dla wszy&tkich indywidualnych 
konfiguracji tych obsadzen. W celu rozujiqzania postaujionego problemu maksymalizacji praujdopodobien- 
stuja 7r(n) z ruarunkami (5.61) oraz (5.66), rozujiqzujemy ponizszy uklad g rouinan: 



d 

drii 



ln7r(n) + | ^ ; 



D 







(5.91) 



otrzymujqc jako rozujiqzanie ujektor obsadzen n: 

n, = n* ^ e" e-^""' , i = l,2,...,g. (5.92) 
Stale I' oraz /? otrzymujemy mykorzystujqc (5.92) uj (5.61) oraz (5.66). 

Uujaga: Aby zapisac Y[i=i ^ formie nadajqcej si§ do minimalizacji, korzystamy z przyblizenia Stirling'a: 



In 



^ni(lnn,; - 1) , 



(5.93) 



slusznego dla duzego ukladu z n >> 1 oraz ?ii » 1, i — 1,2, g. 



Uklad UJ roujnoujadze statystycznej: Przedstaujiona w tym przypisie metoda znajdoujania rozkladu w rowno- 
wadze statystycznej zaklada spelnienie hipotezy ujyrazonej rouinaniem (5.90) i moujiqcej, ze wszystkie stany 
opisane wektorem indywidualnych przypisan H^"^ , a spetniajqce warunki (5.61) oraz (5.66) sq rownie 
prawdopodobne. Rozklad opisany uiektorem n* jest uj tym uj^ciu sednem deflnicji rozkladu, b^dqcego uj 
roujnoujadze statystycznej. 
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5.1.5 RozkJad Maxujella-Boltzmanna dla pr^dkosci 

Ponizej luyznaczymy rozkiadu pr^dkosci czqsteczki u; gazie. Wychodzqc z informacji Fishera (5.7) 
dla p^du oraz poslugujqc si^ luariacyjnq i strukturalnq zasadq informacyjnq (5.9) otrzymamy romna- 
nie generujqce i znajdziemy jego rozLuiqzania, tzn. postac amplitud dla rozkiadu pr^dkosci. 



Wartosc ujspoiczynnika efektyiunosci: Ze ujzgl^du na spojnosc roziuazan dla czterotuektora p^du, 
przyj^cie ujspoiczynnika k = 1 u; roztuazaniach dla energii skutkuje przyj^ciem k = 1 u; analizie dla 
rozkiadu p^du. 

Pojemnosc informacyjna parametru @^ zostaia podana w (5.7): 

/{e,)=-4/..,i:t(%a^)^ 

•'^P n=lk=l ^ "^^k ^ 

gdzie znaczenie znaku "minus" uj definicji pojemnosci informacyjnej dla cz^sci p^doujej zostaio omo- 
ujione uj Rozdziale 5.1.2. 



Informacja strukturalna i zaleznosc cf „ od amplitudy oraz pr^dkosci: Q dla parametru ma 
postac: 



N 

-^^p n=l 



(5.94) 



Wproujadzenie do obsertuoujanej informacji strukturalnej cf ^(gn(xp), Xp) jej jaiunej zaleznosci nie 
tylko od amplitud ale rotuniez od p^du Xp, pozujala na rozujazenie szerszego zakresu zagadnien 
niz to miaio miejsce dla przypadku rozkiadu energii, mianoujicie pozujala na rozujazenie rozujiqzan 
nierownowagowDch. 

Obserujoiuana, strukturalna zasada informacyjna: Podobnie jak to uczynilismy uj (5.18) dla energii, 
tak i teraz dla pojemnosci informacyjnej / (B^j), (5.7), dokonamy caikomania przez cz^sci. Zakiadajqc 
dodatkoujo, ze amplitudy dla pr^dkosci (?n(xp) znikajq uj ± nieskonczonosci, oczekiujana struktu- 
ralna zasada informacyjna i'{Qp) + + Kq{Q^) = uj (5.9) przyjmuje postac: 



N 



n=l 



3 ^2 



—Q-3 + 4 9n(Xp)cf„(g„(Xp),Xp) 

k=l 



0. 



(5.95) 



gdzie fakt, ze C^j = 0, nie ujnoszqc tym samym ujkiadu uj poujyzszq zasad^ strukturalnq, ujynika ze 
znikania amplitud uj nieskonczonosci. 



Wariacyjna zasada informacyjna uj (5.9) przyjmuje postac: 



N 

^(..)(^(0p)+Q(0p))=4/ rfxp^ 

J n=l 



■E 



ri(xp)) Xp) 



. (5.96) 



Rotunania Eulera-Lagrange'a: Rozujiqzaniem A^-funkcyjnego problemu ujariacyjnego (5.96) jest ukiad 
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romnan Eulera-Lagrange'a: 



A d I 9fc(gn(Xp),Xp) \ _ 9fc(gn(Xp),Xp; „ _ i 9 at qyX 



gdzie 

3 /Q_ N\ 2 

^(Qn(Xp),Xp) = 4 



+|^n(Xp)cf„(gn(Xp),Xp) 

jest g^stosciq informacji fizycznej (4.7) zdefinioujanq w Rozdziale 4.2. 



(5.98) 



Nieujemnosc k: Zauiuazmy, ze z (5.98) i z zqdania nieujemnosci informacji fizycznej k na poziomie 
obserujoujanym, ujynika: 

cf„(<7„(xp),xp) >0, (5.99) 

tzn. nieujemnosc obserwowanej informacji strukturalnej w analizie estymacyjnej wartosci oczeki- 
wanej p^du czqsteczki gazu. 

Uujaga: Ponizej, ze ujzgl^du na uproszczenie zapisu, pominiemy zaznaczenie fluktuacji p^du Xp uj 
argumencie amplitudy qn{xp). 

Uklad rotunan rozniczkotxiych: Dla kazdego n = 1, 2, A^, zasada strukturalna (5.95) jest na pozio- 
mie obserujoujanym nast^pujqca: 

3 q2 -j^ 

1n^-Q^ + ^'ln<fniQn,^p)=0 . (5.100) 

-m=l 

Natomiast kazde z N roujnan Eulera-Lagrange'a (5.97) ma postac nast^pujqcego roujnania rozniczko- 
ujego: 

^ d'^qn _ l g(ign^n(gn,Xp)) 

^ dxl "2 dqn ■ ^ ' 

m=l S^'" 

Roujnanie strukturalne (5.100) ujraz z roujnaniem Eulera-Lagrange'a (5.101) posiuzy do ujyproujadze- 
nia roujnania generujqcego rozkiad Maxujella-Boltzamnna. 

Wyproujadzenie roujnania generujqcego: Roiunania (5.100) oraz (5.101) poziualajq luyeliminoujac 
ujyst^pujqcq UJ nich sum^, daj^c roujnanie: 

2 dqn qn 

ktore po obustronnym scaikoujaniu protuadzi do roztuiqzania: 

\ Qn ^ niQn, ^p) = Qnf ni^p) , (5.103) 

lub 

cf„(g„,xp) = 4/„(xp)>0. (5.104) 



(5.102) 
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Funkcja /„(xp) nie zalezy od amplitudy g„ i pojatuiia si^ uj ujyniku calkoiuania roiunania (5.102) 
jako peujna staia caikoujania uj znaczeniu jej niezaleznosci od amplitudy g„. Zaznaczona nieujem- 
nosc funkcji /„ (xp) w jej dziedzinie ujynika z nieujemnosci cf Xp) otrzymanej uj (5.99). 

Roujnanie genemjqce: Wykorzystujqc (5.103) uj (5.100) eliminujemy obserujoujanq informacj^ struk- 
turalnq, otrzymujqc rownanie generujqce dla amplitudy rozkiadu (fluktuacji) pr^dkosci Xp czqsteczki 
UJ gazie: 

V^g„(xp) = -g„(xp) /„ (xp) , (5.105) 
gdzie = Ylm=i ^"^ I'^^'pm J^^* operatorem Laplace'a ze ujzgl^du na ujspoirz^dne p^douje Xp^. 

Roujnanie (5.105), podobnie jak (5.34), pojatuiio si^ jako rozujiqzanie strukturalnej i mariacyjnej za- 
sady informacyjnej. 

Rozujiqzanie g„ roujnania (5.105) jest samospdjnym rozujiqzaniem sprz^zonego ukiadu roujnan roz- 
niczkoujych (5.100) i (5.101), utujorzonych przez par^ zasad informacyjnych. 

Rozujiqzanie roujnania generujqcego: Ponizej rozujiqzemy rotunanie generujqce (5.105), czyniqc kilka 
fizycznych zaiozen odnosnie postaci funkcji /„(xp). Jej postac tupiyuja na postac otrzymanych am- 
plitud g„ (xp), a zatem roujniez na rozkiad p(xp). 

Fizyczne zaiozenia o postaci /„(xp): Zaiozmy, ze kazda g^stosc rozkiadu pratudopodobienstma 
Pn{x) jest takq samq funkcjq parzystq kazdej xuspoirz^dnej Xp- (fluktuacji) p^du Xp. W konsekujencji 
uklad jest izotropowy, tzn. rozkiad pratudopodobienstma dla p^du nie zalezy od kierunku uj bazoujej 
przestrzeni poiozen. 

Nast^pnie zakiadamy nierelatywistyczne przyblizenie, co oznacza, ze pr^dkosci czqsteczek sq duzo 
mniejsze od pr^dkosci sujiatia c, czyli fluktuacja p^du czqsteczki Xp. jest roujniez maia uj poroujnaniu 
z mc. 

Z poujyzszych zaiozen ujynika ogolna postac funkcji /„(xp). Otoz jej roztuini^cie uj szereg pot^goujy 
ma tylko skiadouje parzyste moduiu fluktuacji p^du |xp|, a ponietuaz ujartosc |xp| jest maia, zatem 
szereg ten obetniemy na drugim ujyrazie: 

/n(xp) = An + B |xpp , An, B = const. (5.106) 

Roujnanie generujqce z /„: Podstaujiajqc (5.106) do (5.105), otrzymujemy nast^pujqcq postac roujna- 
nia generujqcego: 

VV(xp) + (A„ + S|xp|2)g„(xp) = dla n = l,2,...,N. (5.107) 
Przejdzmy do noujego indeksu: 

n' := n- 1 = 0, l,...,iV - 1 . (5.108) 
Wtedy UJ miejsce (5.107) otrzymujemy roiunanie: 

VV'(xp) + (A„/+S|xp|2)g„,(xp) = dla n' = l,2,...,iV-l, (5.109) 
ktore po dokonaniu separacji zmiennych kartezjanskich i faktoryzacji amplitudy: 

Qn' (Xp) = Qn'^ (XpJ q^'^ (XpJ q^'^ (Xpg) , (5.110) 
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przechodzi u; roiunoiuazny mu uklad trzech roiunan rozniczkoujych: 

3 

Qn',i^p^)+ {^n[+Bxl^^q^>^{xp^) = , i = 1,2,3, ^A„,^=An,. 

i=l 

Gdy stale roiunania (5.111) majq postac: 

n'- + l/2 1 
A, = 2 ' B = -—^, ao = const., 11^ = 0,1,..., 



(5.111) 



(5.112) 



ujtedy ma ono roziui^zanie. 

Postac rozujiqzania: Ponietuaz kazde z romnari (5.111) jest rotunaniem Helmholtz'a, zatem jego roz- 
tuiqzaniami sq paraboliczno-cylindryczne funkcje [53, 54]: 

q^' M = e-</("'o)2-</'H^, (^) , gdzie = 0, 1, ... , i = 1,2,3 , (5.113) 



V2 



gdzie H I sq ujielomianami Hermite'a: 



b72] 



H,{t)=j\Y,{-^) 



j — 2m 



m=0 



m\ (j — 2m)! 



J = 0,1,... , 



(5.114) 



gdzie [j/2] oznacza liczb^ caikoujitq nie przekraczajqcq j/2. 



Amplitudy fluktuacjl p^du: Wstaujiajqc (5.113) do (5.110) otrzymujemy szukanq postac amplitudy 
fluktuacji p^du: 



-|xp|V(4ag) 2-"'/2 



E V (^) H, (^) H, (^) , gdzie = const. , (5.115) 

±^ \aoV2j \aoV2j \aoV2j ""nk 



ijk 
i+j+k=n 

przy czym: 

3 

^n[ = n' = 0,1,...,N -1. 

i=l 



(5.116) 



Rozkiad fluktuacji p^du: Funkcja rozkiadu praujdopodobienstuja ma tui^c zgodnie z (3.61) postac: 



N~l 



p) =Poe 



-|xpP/(2a2) 



n.'=0 



1 + E2- 



n =1 



ijk 

_i+j+k=n 



V2 



, (5.117) 



gdzie pq = Oq^^^^/N, a liczba 1 u; naujiasie klamroiuym pochodzi z 77,' = uj sumie u; piertuszej 
roujnosci, natomiast nouje stale b > sq proporcjonalne do staiych a / . 

ij k ij k 
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Po raz pierujszy takie luyproujadzenie postaci funkcji rozkiadu g^stosci praujdopodobienstuja dla 
fluktuacji p^du zostaio podane uj [8]. 



Rozujiqzania roirnoiragouje i nieroumoiragoiue: Wartosc = 1, dla ktorej (5.117) jest rozkiadem 
Gaussa, daje roxunoujagoujy rozktad Maxwella-Boltzmanna dla (fluktuacji) p^du czqsteczki gazu. 
Pozostaie roztuiqzania dla N > 2 daj^ rozujiqzania nierotunoiuagouje [8]. Jednak i one stacjonarne 
ze ujzgl^du na fakt bycia samospojnymi rozujiqzaniami ukladu sprz^zonych roujnan rozniczkoujych 
zasady strukturalnej (5.100) i tuariacyjnej (5.101). 

Wczesniej, rozkiady (5.117) z N > 2 zostaiy odkryte przez Rumer'a i Ryskin'a [55] jako roziuiqzania 
roujnania transportu Boltzmann'a. 



Interferencja roztuiqzan: Zturocmy uwagQ, ze roztuiqzanie (5.117) implikuje interferencj^ pomi^dzy 
ujyrazeniami iloczynoujymi ujyst^pujqcymi u; amplitudach (5.115). Interferencja pojaujila si^ uji^c 
jako cecha charakterystyczna dla rozujiqzyujanego roujnania rozniczkoujego oraz ujproujadzenia am- 
plitud do opisu ukiadu, a nie jako cecha charakterystyczna ujyiqcznie mechaniki ktuantoujej. 



Rozkiad Maxirella-Boltzmanna dla pr^dkosci z = 1: Zaiozylismy na tust^pie, ze zbiornik za- 
UJierajqcy czqsteczki gazu jest u; spoczynku, uj peujnym inercjalnym ukiadzie ujspoirz^dnych. Zatem 
srednia pr^dkosc czqsteczki ujynosi zero, tzn. 9p = iz (5.2) otrzymujemy yp = Xp = p. 

Tak ujiec, dla = 1 rozkiad g^stosci praiudopodobiehstiua p^du (5.117) przyjmuje postac: 

gdzie p = (pi, p2, ps) oraz — oo < pj < oo, i = 1, 2, 3. Wyznaczmy ujartosc staiej oq dla przypadku 
zeroujej energii potencjalnej. Z ujarunku normalizacji / dpp{p) = 1 ujyznaczamy, ze staia po w 
(5.118) ujynosi: 

Ponieujaz ujtedy (E) = (p^) /{2m) , a z tujierdzenia o ekujipartycji energii ujiemy, ze (E) = 3kT/2, 
zatem 

{p^) = 3mkT. (5.120) 
Majqc ujartosc po, ujyznaczmy tuartosc oczekimanq: 

(p^> = I dpp{p)^ (5.121) 

i przyroujnajmy jq do (5.120). W rezultacie otrzymujemy: 

al = mc^kT . (5.122) 

Rozkiadu ujartosci p^du: Kolejnym krokiem jest ujyznaczenie rozkiadu praujdopodobienstuja ujarto- 
sci p^du p = I p |. Przechodzqc od uJspoirzQdnych kartezjahskich p^du (pi , p2, ps) do ujspoirz^dnych 
sferycznych (p, 0, (f>), otrzymujemy: 

P(p,6',0) = |J|p(pi,p2,P3) , J=p^sin6', (5.123) 
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gdzie J jest jakobianem przejscia. Wstaujiajqc teraz (5.119) ujraz z (5.122) do (5.118) otrzymujemy 
rozkiad p (pi, p2, Ps) ze znanymi juz staiymi qq oraz po- Wynik ten Lustamiajqc do (5.123) i ujycai- 
koiuuj^c po zmiennych 6 oraz cp, otrzymujemy szukany rozkiad g^stosci pravudopodobienstiua dia 
luartosci p^du: 

p (p) = {mkT)-'^'^ p2g-pV2mfcT ^ (5_j24) 

Praujo Maxujella-Boltzmanna: Rozkiad (5.124) ruyraza tzuj. praujo Maxtuella-Boltzmanna, a podsta- 
ujiajqc p = mv in (5.124), in miejsce ruartosci p^du, otrzymujemy rozkiad Maxujella-Boltzmanna dla 
ujartosci pr^dkosci v czqsteczki gazu. 

5.1.6 Informacja Fishera jako ograniczenie dla ujzrostu entropii 

Roztuazmy ukiad zatuierajqcy jednq lub wi^cej czqstek poruszajqcych si^ u; sposob losotuy, uj 
peiunym zamkni^tym obszarze. Niech roztuazany obszar b^dzie izoloujany, tzn. zadna cz^stka ani z 
obszaru nie ucieka ani do niego nie przechodzi. Brzeg {B) obszaru jest zadany ujektorem ujodzqcym 
6 S -B. W peujnej chujili ukiad dokonuje pomiaru jego czteroujektora poiozenia t, y, zgodnie z roz- 
kiadem g^stosci praujdopodobienstuja p{y, ty. 

Niech {y^,y'^,y^) sq ujspoirz^dnymi kartezjahskimi ujektora y poiozenia przestrzennego, ar = \y\ 
jego diugosciq. Ponieiuaz zaiozylismy, ze czqstka znajduje si^ gdzies ujeujnqtrz obszaru uji^c: 



p{t) = J dyp{y,t) = 1 . (5.125) 
Oznaczmy przez Sh {t) entropi^ Siiannona ukiadu (2.147) w cinuili czasu t: 

SH{t) = - [ dy p{y, t) In p{y, t) . (5. 1 26) 



Drugq zasada termodynamiki: Mozna pokazac (por. Dodatek 7.4), ze entropia Shannona speinia 
drugq zasad^ termodynamiki: 

ktora okresla dolnq granic^ tempa zmiany entropii. Ponizsze rozujazania posuji^cone sq znalezieniu 
ograniczenia na jego gorn^ granic^. 

Roujnanie ciqglosci strumienia: Ponieujaz zadna czqstka nie opuszcza ani nie ujpiyuja do obszaru, 
zatem speinione jest roujnanie ciqgiosci strumienia praujdopodobienstuja: 

dp{y, t) 



dt 



+ V ■ P{y,t) = , (5.128) 



gdzie P {y, t) jest prqdem prawdopodobienstwa, ktorego konkretna postac zalezy od rozujazanego 
ukiadu. 

Warunki brzegouje: Z kolei okreslmy ujarunki brzegouje speiniane przez g^stosc pratudopodobieh- 
stuja i jego prqd. B^dq nam one przydatne dla rozujiqzania postatuionego sobie zadania. 



Jesli ukiad opisany jest funkcjq falom^ ipiv, i). UJtedy p{y, t) — \ij}{y,t)f 
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Ponieujaz zadne czqstki nie przechodzq przez granic^ obszaru, zatem P speinia ujarunek brzegoujy 
Dirichleta: 



y€B 



. 



Zaiozmy dodatkotuo, ze jesli brzeg obszaru znajduje si^ w nieskoriczonosci, to: 
Jim P (y , t) — 7- , szybciej niz . 

y—^oo 



(5.129) 



(5.130) 



Ponieujaz obszar jest odizoloujany, zatem praiudopodobienstmo, ze czqstka znajduje si^ najego gra- 
nicy znika, co oznacza, ze p{y, t) romniez speinia marunek brzegomy Dirichleta: 



pill, i) 



y€B 



. 



lim p (y I t ) — 7- , szybciej niz 

y—^oo 



Plnp 



y&B 



. 



(5.131) 



Ze ujzgl^du na normalizacj^: 

dyp{y,t) = l, (5.132) 
zakiadamy, ze w przypadku brzegu nieskonczenie oddalonego, p{y, t) speinia marunek: 

(5.133) 

W kohcu dla domkni^cia potrzebnych marunkom brzegoujych przyjmujemy: 



(5.134) 



Wypromadzenie ograniczenia na tempo ujzrostu entropii: Przystqpmy teraz do sedna rachunkom. 
Rozniczkotuanie (5.126) po ^ daje: 



d 



dy phip 



dy ^Inp 



dyp 



1 dp 



at dt j j dt j "^pdt ' 

Druga caika po pramej stronie daje po skorzystaniu z marunku unormoiuania: 

d 



dt 



dy p = . 



(5.135) 



(5.136) 



Oznaczmy przez [P^,P'^,P^) kartezjahskie skiadoiue prqdu P. Podstaiuiajqc (5.128) do pierujszej 
caiki po pramej stronie uj (5.135) otrzymujemy: 



dt 



gdzie Vi = ^ . 



V -Plnp 



dy^ dy^ dy^ 



Qyl Qy2 Qyd, 



Inp, (5.137) 



Caikujqc przez cz^sci meiun^trzne caiki J dy^^P^ w (5.137) dla trzech skiadnikom i = 1,2,3, 
otrzymujemy dla kazdego z nich: 



df{^P')lnp = P'lnp 
dy' 



gdzie skorzystano z (5.134). Zatem: 



ydB 



dy 



jP^ dp 
p dy' 



dy'P'^-, i = 1,2,3, (5.138) 
dy' p 



dSn 
dt 



> dy^ dy^ dy^ J p 



dyiP-Vp 



p 



(5.139) 
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Z poujyzszego, po prostych przeksztaiceniach mamy: 



as 



H 



dt 



i=l 



(5.140) 



Z nieroujnosci Schiuartza otrzymujemy: 



V 



1=1 



P 



(5.141) 



Ogolna postac ograniczenia na tempo ujzrostu entropii: Ostatecznie z (5.140) i (5.141) oraz po zast^- 
pieniu sumoiuan po i znakiem iloczynoiu skalarnych, dostajemy: 

2 



pp 

p 



dy 



Vp • Vp 
P 



(5.142) 



d a 



a 



zaujiera 



Przejscie do postaci z pojemnosciq informacyjnq: Ponieiuaz gradiant V = ( 
rozniczkoujanie po tuartosciach pomiaroujych y*, a nie fluktuacjach x*, jak to jest w kinematycznej 
postaci pojemnosci informacyjnej Friedena-Soffera, zatem musimy uczynic dodatkotue zaiozenie. 
Zaiozenie niezmienniczosci rozkiadu ze ujzgl^du na przesuni^cie: Przejdzmy do addytyujnych 
przesuni^c, x = y — 0. Ponietuaz x = {x^)f^i oraz y = (y*)f=i rozni^ si§ o staiq ujartosc oczeki- 
ujanq poiozenia = {9^)f^i, zatem zahladajqc dodathowo , ze rozklad p jest niezmienniczy ze 
wzgl^du na przesuni§cie 9, otrzymujemy: 



^ = ^, ^ = l,2,3. 

Qyl Qrji-l 

Przy poujyzszym zaiozeniu, zachodzi: 



dy 



Vp{y,t)-Vp{y,t) 

p{y, t) 



dx 



Vp{x, t) ■ Vp{x, t) 
p{x, t) 



(5.143) 



(5.144) 



i okazuje si^, ze druga caika po praujej stronie nierotunosci w (5.142) jest pojemnosciq informacyjnq 
trzech kanaiotu przestrzennych dla = 1 uj chmili czasu t: 



I = I[t)= j dx 



Vp {x, t) ■ Vp (f , t) 
P {x, t) 



(5.145) 



Ograniczenia na tempo UJzrostu Sh ukiadu z niezmienniczosciq przesuni^cia: Korzystajqc z po- 
tuyzszej postaci pojemnosci informacyjnej, mozemy zapisac (5.142) nast^pujqco: 



pp 

p 



(5.146) 



Pokazalismy zatem, ze przy zaiozeniu niezmienniczosci rozkiadu za wzgl^du na przesuni^cie, 
tempo ujzrostu entropii jest obustronnie ograniczone. Ograniczenie dolne (5.127) ujyraza zasad^ nie- 
malenia entropii Shannona w czasie. Jej termodynamicznym odpoujiednikiem jest tujierdzenie H 
Boltzmanna. 
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Wniosek: Nieroiunosc (5.146) oznacza, ze ograniczenie gome tempa wzrostu entropii jest proporcjo- 
nalne do pierwiastka z pojemnosci informacyjnej (5.145) dla pomiaru polozenia y. Jest to jednen z 
notuych tuynikou; teorii pomiaru otrzymany przez Friedena, Soffera, Plastino i Plastino [8]. Jego ter- 
modynamiczne konsekiuencje czekajq na ujerylikacj^. 

W [8] podano przykiady zastosomania tego tiuierdzenia dla strumienia czqstek klasycznych, strumie- 
nia uj elektrodynamice klasycznej i strumienia czqstek ze spinem 1/2. Ponizej zostanie podany ujynik 
analizy dla tego ostatniego przypadku. 

5.1.6.1 Wynik dla strumienia czqstek ze spinem 1/2 

W Rozdziale 4.3.3.2 pokazalismy, ze metoda EFI daje dla relatyujistycznej czqstki o spinie poloiuko- 
ujym roujnanie ruchu Diraca (4.52). Pod nieobecnosc pola elektromagnetycznego ujynikajqce z niego 
roujnanie ciqgiosci ma postac: 

^^p{y,t) + V-P{y,t) = 0, (5.147) 

gdzie g^stosc praujdopodobienstuja p oraz g^stosc pr^du praujdopodobiensttua sq rotune odpoujied- 
nio: 

= VV, i^ = 4^{y,t) , (5.148) 

oraz 

P{y,t) = cij^ ai^ , (5.149) 

gdzie a = (a^,a^,a^) sq macierzami Diraca (4.49), natomiast ip^ = (V'l; ^^2, V'Si V^4)* j^st polem 
sprz^zonym hermitoujsko do bispinora Diraca ip (Rozdziai 4.3.3.2). 



Ograniczenie na tempo ujzrostu entropii: W [8] pokazano, ze tempo ujzrostu entropii (5.146) ma 
UJ tym przypadku postac: 

^<cv/7M. (5.150) 



Wniosek: Nieroiunosc ta oznacza, ze dla ukiadu, ktory posiada niezmienniczosc przesuni^cia, tuzrost 
entropii Shannona rozkiadu uj jednostce czasu (czyli tempo spadku informacji) jest ograniczony przez 
skonczonq pr^dkosc sujiatla jak roujniez przez pojemnosc informacyjnq, jakq posiada uklad (np. sujo- 
bodny elektron) o sujoich ujspolrz^dnych czasoprzestrzennych. 

Inny sposob interpretacji (5.150) polega na zauujazeniu, ze dostarcza ona delinicji pr^dkosci sujiatia c 
jako gornego ograniczenia stosunku tempa zmiany entropii do pieriuiastka informacji Fishera, ktora 
jest przeciez na ujskros statystycznym poj^ciem informacyjnym. 
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5.2 Zastosoujanie ujproiuadzonego formalizmu do analizy paradoksu EPR 



Przedstatuiona w tym rozdziale analiza paradoksu EPR pochodzi od Friedena [8]. Zamieszczamy 
ze tuzgl^du na to, ze efekt ten jest dose potuszechnie utozsamiany z tuiasnosciq teorii kiuantotuych, ale 
rotuniez z poujodu uporzqdkotuania tuarunkou; brzegoujych zagadnienia zaujartego lu pracy orginal- 
nej [8], a przedstatuionego w pracy [16] oraz innioskoinania uzgodnionego z przedstaiuionq ru skrypcie 
lizyczn^ interpretacjq informacji lizycznej K [9, 10]. 

Opis eksperymentu EPR-Bohm'a: Rozpocznijmy od omoujienia eksperymentu EPR-Bohm'a. Roz- 
mazmy zrodio molekui o spinie zero, ktore rozpadajq si^ na par^ identycznych czqstek o spinie 1/2 
lec^cych uj przeciujnych kierunkach. Taka, poczqtkouja dla rozujazan eksperymentu EPR-Bohm'a, 
konliguracja dujuczqstkoujej molekuiy moze bye efektyujnie przygotoujana jako stan kohcoujy u; 
rozpraszaniu e~ e~ — )• e~e~, gdzie spiny poczqtkoujych elektronou; procesu sq ustaujione przeciujnie 
(roujnolegle i antyroujnolegle ujzgl^dem osi z), a ich poczqtkouje p?dy ujzdiuz osi y ujynoszq p oraz 
— p [56]. Istnieje niezerouja amplituda, ze dujie rozproszone czqstki (tu ujyprodukoujane elektrony), 
poruszaj^ si^ z p^dami ujzdiuz osi x, jak na Rysunku 5.1. 



Rysunek 5.1: Eksperyment EPR-Bohma. Zaznaczono elektrony rejestrowane u; urzqdzeniach Sterna- 
Gerlacha; opis w tekscie Rozdziaiu. W leujym gornym rogu rysunku zaznaczono k^t -& pomi^dzy 
kierunkami a oraz b urzqdzeh Sterna-Gerlacha. 

W eksperymencie EPR-Bohm'a dokonyujany jest pomiar spinu rozproszonych cz^stek, spinu czqstki 
1 ujzdluz ujektora jednostkouiego a, tujorzqcego z osiq z kqt xi oraz spinu cz^stki 2 ujzdiuz ujektora 
jednostkoujego b, tujorzqcego z osiq z kqt X2- Niech analizator „a", b^dqcy urzqdzeniem typu Sterna- 
Gerlacha, mierzy rzut Sa spinu Si czqstki 1 na kierunek a i podobnie analizator „6" mierzy rzut Sb 
spinu ^2 czqstki 2 na kierunek b. Kqt pomi^dzy piaszczyznami ujektorou; a oraz b, zaiuierajqcymi os 
X, ujynosi i? = Xi — X2, < < 27r. 

Ponizej luyproujadzimy xuarunki brzegotue dla metody EFI, utuazaj^c aby nie odiuoiyujac si^ do uji- 
dzenia rzeczyujistosci przez pryzmat mechaniki kujantotuej ^. 

®Lecz bior^c pod uiuag^ ogolne stujierdzenie, ze jesli P12 jest Iqcznym rozkladem praiudopodobienstma pemnych dmoch 
zmiennych losomych "1" oraz "2", a Pi oraz P2 ich rozkladami brzegomymi, to jesli w ogolnosci nie s^ one luzgl^dem siebie 
niezalezne (tzn. l^czne pramdopodobienstiuo nie jest iloczynem brzegoujych), mtedy: 



gdzie C jest pojemnosci^ informacyjn^ zlozonego ukladu. Relacja (5.151) oznacza, ze jesli myst^pujq jakiekoliuiek korelacje 
mi^dzy zmiennymi to, jesli znamy luynik dosmiadczenia dla pieriuszej zmiennej to maleje ilosc informacji koniecznej do 
okreslenia inyniku dosmiadczenia dla drugiej z nich, tzn. istnienie korelacji m ukladzie zmi^ksza informacji Fishera If o 
parametrach charakteryzujqcych rozklad ukladu. 




If {P12) > If (Pi) + If {P2) = C 



(5.151) 
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5.2.1 Warunki brzegovue 

W celu rozujiqzania roiunan rozniczkoiuych EFI konieczne jest ustalenie tuarunkotu brzegoiuych 
na praujdopodobienstiua. Wynikajq one z przesianek fenomenologicnych, zasad zachoujania i syme- 
trii przestrzennej badanego ukiadu. 

Zaiozenie o istnieniu dohladnie dwoch moiliwDch rzutow spinu czqsthi ze spinem h/2 na do- 
wolny wybrany kierunek w przestrzeni: Niech "+" oznacza obserujoujanq luartosc rzutu spinu Sa = 
+h/2 natomiast "— " oznacza Sa = —h/2. 

Uujaga o fenomenologii rejestracji spinu czqstki: Jest to jedyne miejsce, w ktorym uciekamy si^ do 
opisu fenomenologicznego, odiuokijqc si^ do nieklasycznej fizyki zjaxuiska, mianoxuicie zakiadamy, ze 
rzutoujanie spinu cz^stki na okreslony kierunek przestrzenny jest skujantoujane zgodnie z ujymiarem 
reprezentacji grupy obrotouj (fakt istnienia takich reprezentacji ujynika z rozujazan entropijnych [8]). 
Jednak nie oznacza to, ze nie istnieje model teoriopoloujy, ktory by takie kujantoujanie rzutoujania 
opisyujal. Musiaiby on jedynie zakiadac, ze po pierujsze spinouje stopnie sujobody (z ciqgiym rozkla- 
dem jego kierunku przed pomiarem) nie majq (prostego) charakteru czasoprzestrzennego [30], a po 
drugie, ze bezujiadnosc czqstki zujiqzana ze spinoiuymi stopniami sujobody jest bardzo mala uj po- 
roujnaniu z silq sprz^zenia tych spinoiuych stopni sujobody z otoczeniem (np. aparatur^ traktoxuanq 
jako rezerujuar), ktorego moment p^du ignorujemy. Wtedy przejscie cz^stki ze spinem przez jakq- 
kolujiek aparatur^ pomiaroujq typu Sterna-Gerlacha porzqdkoujaloby jej spin uj sposob dyskretny. 
Oczyujiscie zmiana momentu p^du aparatury juz nas "nie interesuje". 

tqcznq przestrzen zdarzen Vlah stanouj spinoujych pary czqstek 1 i 2 przyjmujemy jako nast^pu- 

= gJ7,6 = {5++, 5+-, {(++), (—),(+-),(-+)} . (5.152) 

Zalozmy, ze mozemy zdelinioujac cztery Iqczne luarunkouje pratudopodobieristuja^ P {Sab\'&)'- 

P{+ + \'d) , , P{+-\^) , Pi- + \^) . (5.153) 

Warunek normalizacji praujdopodobienstuja P {SaSb\'&) w eksperymencie EPR-Bohm'a mozna, ze 
ujzgl^du na ujykluczanie si^ roznych zdarzen Sab, (5.152), zapisac nast^pujqco: 

P ( U SaSbW ] =J2^ (SaSbl^) = 1 dla kazdego G (0, 2^) . (5.154) 

\ ah / ab 

przypadku braku luspolnej przestrzeni zdarzen V.ab dla zmiennych losoujych pomiedzmy A oraz B, nie mozna by 
zdeflnioLuac Iqcznego rozkladu praindopodobieristira P{A, B) dla tych dinoch zmiennych, pomimo istnienia ich rozkla- 
doiB brzegomych P{A) oraz P{B), co oznacza, ze nie dalo by si§ dokonac ich Iqcznego pomiaru. Roiuniez na ogol, pomimo 
istnienia Iqcznego rozkladu brzegoiuego P{A, B) dla zmiennych A oraz B, oraz rozkladu brzegoinego P{B, C) dla zmien- 
nych B oraz C, nie istnieje rozkiad iqczny P[A, B, C) dla zmiennych A, B i C. Zuirocmy uiuag^ na fakt, ze in doiuodzie 
nieroujnosci Bella [57, 48] przyjmuje si^ za oczymisty fakt istnienia l^cznego rozkladu P{A, B, C). Mozliujosc taka istnieje 
zaujsze, gdy luspolna przestrzeri zdarzen Q,abc tych trzech zmiennych losoiuych istnieje i jest iloczynem kartezjariskim 
Qa X JIb X Qc- Z drugiej strony, nieroiunosci Bella znane U3 klasycznej teorii pramdopodobieristuja od czasoiu Boole'a 
jako test, ktory lu przypadku ich niespeinienia siuiadczy o niemozlitnosci konstrukcji Iqcznego rozkladu praujdopodobien- 
stuja. Rozumoiuanie to mozna rozszerzyc na doiuolnq liczb^ zmiennych losoiuych [48, 58[. 

W pelnym opisie rzeczyiuistego eksperymentu EPR-Bohm'a, a nie tylko m eksperymencie typu „gedanken", pominny ujyst§- 
pomac obok diuoch zmiennych losoiuych rzutoiu spinom mierzonych w analizatorach „a" oraz „b", roiuniez diuie zmienne 
losoiue kqtome mierzone dla tych czqstek lu chiuili ich produkcji. 
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W analizie estymacyjnej postulujemy, ze praujdopodobienstujo P {Sab W) jest funkcjq estyma- 

tora ?? parametru ??. 

Metoda estymacji: Korzystajqc z proporcjonalnosci praujdopodobiensttu(5.153) do obsertuoiuanej li- 
czebnosci zdarzen w detektorze, oszacoujuje si^ ujartosc kqta ??. Jednak, aby to uczynic, trzeba miec 
model analitycznych formui na praujdopodobieristiua (5.153). Ponizej ujyproujadzimy je metodq EFI. 



Sformuioiranie ujarunkoir brzegoirych. 



(1) Ponieujaz zdarzenia (5.152) ujykluczajq si^ ujzajemnie i rozpinajq caiq przestrzen zdarzen, lui^c 
pierujszym luarunkiem brzegotuym jest ujarunek normalizacji: 

^ P (Sab) = P iS++) + P + P + P = 1 , (5.155) 

ab 

speiniony niezaleznie od ujartosci kqta 



Dla kazdego zdarzenia ab praujdopodobienstuja P (Sab) oraz P (SabW) sq ze sobq zuji^zane nast^- 
pujqco: 

27r 

P (Sab) = j P {Sab\^) r {d) M , (5.156) 



gdzie usrednienie nastqpiio z tzw. funhcjq niewiedzy r(i9). Ze ujzgl^du na ujarunki unormoujania 
(5.154) oraz (5.155) otrzymujemy jej mozliiuq postac: 

r(t?) = J- , < I? < 27r , (5.157) 

ZTT 

ktora oznacza, ze uj zakresie aparaturoujej zmiennosci ustaujienia ujartosci kqta {} £ (0, 27r), z poujodu 
naszej nieujiedzy, jest mozliuja uj roujnym stopniu kazda jego ujartosc. 



Uujaga o ujartosci kqta Wartosc •& jest ziuiqzana z ustaiuieniem aparatury pomiaroxuej Sterna- 
Gerlacha „o" i „b", i trudno jq (na serio) traktoujac jako ujielkosc posiadajqcq rozproszenie. Zasadnicza 
-& jest parametrem charakterystycznym dla przeproujadzonego eksperymentu. Niemniej przez niekto- 
rych r('d) jest ujidziane jako „praujdopodobienstujo" znane a priori, co oznacza, ze ujyproujadzonq uj 
ten sposob mechanik^ kujantoujq nalezaloby traktoujac jako statystycznq teori^ Bayesoujskq [?]. 



(2) Kolejne tuarunki ujynikajq z symetrii ukiadu i zasady zachoiuania calkoiuitego spinu przy czym 
UJ eksperymencie wzgl^dny orbitalny moment p§du wynosi zero. 



Rozujazmy prosty przypadek i9 = 0, gdy obie piaszczyzny, uj ktorych ustaujione sq urzqdzenia Sterna- 
Gerlacha sq tak samo zorientoujane. Z ujarunku zachoujania caikoujitego spinu ujynika: 

+ |0) = P(- - |0) = , i9 = (5.158) 

CO oznacza, ze uj tym ustaujieniu aparatury nigdy nie zobaczymy obu spinouj jednoczesnie skierouja- 
nych UJ gor^ czy uj doi. Analogicznie, jesli kqt t9 = vr, to ujarunek: 

Ivr) = P(- + 1^) = 0, ^ = 7r (5.159) 
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oznacza, ze uj tym przypadku nigdy nie zobaczymy spinou; ustaiuionych jeden uj gor^ drugi uj doi. 
W konsekujencji z zasady zachoujania caikoujitego spinu otrzymujemy, ze jesli ?? = lub i? = vr, 
to zaujsze obsertuacja jednego spinu daje nam caikoujitq tuiedz^ o drugim. W tym przypadku stany 
spinouj ujyraznie nie sq niezalezne, sq stanami skoreloujanymi. Wniosek ten jest intuicyjnie zaujarty 
UJ sposobie ich przygotoujania. 

Nast^pnie, ponieujaz P {Sh\'&) jest praujdopodobienstujem brzegoujym ujystqpienia okreslonej ujar- 
tosci rzutu spinu czqstki 2, zatem nie zalezy ono od Sa, czyli od orientacji rzutu spinu czqstki 1, uji^c 
nie zalezy roiuniez od k^ta pomi^dzy tuektorami a oraz b. Mamy uji^c: 

P (SbW) = C = co7ist. (5.160) 

Stcjd 

P{Sb) = j P{SbW)r{'d)d'9 = C j r{^)dd = C dla Sb = +,-, (5.161) 



gdzie r{'d) jest okreslone uj (5.157). 

Z marunku unormoiuania praiudopodobienstuja zdarzenia peujnego, mamy 

P{Sb = +) + P{Sb = -) = C + C = 2C = l czyli C=]^. (5.162) 
Zatem z (5.160) otrzymujemy, ze^° : 

P{Sm = \. (5.164) 
natomiast z (5.161): 

P{Sb) = \. (5.165) 

Inn^ ujaznq ujlasnosciq symetrii przestrzennej eksperymentu jest brak preferencji ujyst^poujania 
spinu skieroujanego uj gor^ czy uj dot, tzn: 

P {S+4'd) = P {S-+\^) oraz P = P |??) , (5.166) 

CO oznacza, ze jesli obserujoujalibysmy eksperyment dla ukiadu odujroconego luzgl^dem osi x o kqt 
vr, to statystyczny ujynik bylby dokiadnie taki sam. Z (5.166) otrzymujemy: 

P{S++) = j P{S++\^)r{^)dd = j P{S—\^)r{'d)d'& = P{S-.) (5.167) 

oraz UJ sposob analogiczny: 

P(5+_) = P(S_+) . (5.168) 

'"Podobnie dla Sa, mychodzqc z P {Sa\'&) — C — const, i post^pujqc analogicznie jak przy przejsciu od (5.160) do 
(5.162), otrzymujemy: 

P{SaW) = ]^. (5.163) 
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Dodatkoujo otrzymujemy: 

P(5+_) = J P {S+^\^) r {^) = J P iS+^\^ + tt) r + it) d-d 

= J P{S++\^)r{'d + TT)d^ = P{S++) , (5.169) 

gdzie uj drugiej romnosci skorzystano ze ztuykiej zamiany zmiennych — )• i9 + vr, uj trzeciej roujnosci 
z tego, ze P (S'+_|i9 + vr) = P a uj ostatniej z r(??) = l/(27r) = r(T9 + vr). 

Jako konsekujencja (5.167)-(5.169) otrzymujemy: 

P(5_+) = . (5.170) 

Ze ujzgl^du na (5.167)-(5.170) oraz (5.155) otrzymujemy: 

P{Sab) = \. (5.171) 
W koncu ujzor Bayes'a na prawdopodobienstwo warunkowe daje: 

P iSa\Sb) = = T^ = l dla kazdego 5„ . (5.172) 

Koncoxue utuagi o ujarunkach brzegoujych: Zautuazmy, ze jak dotqd u; ujyproujadzeniu zaieznosci 
(5.158) do (5.172) nie skorzystano z EFI. to boujiem ujarunki brzegouje dla roujnan metody EFI. 
Zaieznosci te ujynikaiy z pocz^tkoujej obserujacji istnienia dla czqstki o spinie poioujkoujym dokiad- 
nie dujoch mozliujych rzutouj spinu na doujolny kierunek (por. Uujaga na poczqtku rozdzialu), zasady 
zachoujania caikoujitego momentu p^du oraz z symetrii ukiadu. Przy ujyborze rozujiqzania rotunania 
generuj^cego rozkiad, skorzystamy jeszcze z luarunku geometrycznej symetrii ukiadu przy obrocie o 
kqt -d = 2-K. 



5.2.2 Pojemnosc informacyjna dla zagadnienia EPR-Bohm'a 



Ponizej ujyproujadzimy tuyrazenia dla praujdopodobienstuj (5.153) jako ujynik estymacji rozkia- 
douj metodq EFI. 

Wielkosc mierzona przez obserujatora: Obserujator zeujn^trzny mierzy jedynie ujartosc rzutu spinu 
jednej czqstki powiedzmy, ze czqstki 1, to znaczy Sa, natomiast nie mierzy ujartosci rzutu spinu dru- 
giej czqstki Sb, jest ona traktoiuana jako tuielkosc nieznana, ale ustalona. Roujniez ujartosc Sb nie jest 
estymoujana z obserujacji Sa- 

Okreslenie przestrzeni poiozen dla EFI: Podobnie jak poprzednio ukiad sam probkuje sujoimi Fi- 
sheroujskimi kinetycznymi stopniami sujobody dost^pnq mu przestrzen poiozen. Tym razem jest to 
jednoujymiarouja przestrzen kqta i^. 

Na podstaujie danych pomiaroujych ujartosci rzutu spinu Sa, estymujemy metodq EFI kqt pomi^- 
dzy dujoma piaszczyznami zaznaczonymi na rysunku 5.1. Kqt ten jest uji^c traktoujany jako nieznany 
parametr i jest estymoujany z obserujacji Sa- 
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Okreslenie funkcji iriarygodnosci i przestrzeni proby: Ponieujaz dokonujemy pomiaru Sa, a Sb 
oraz -d nieznanymi, ale ustalonymi ujielkosciami, zatem funkcji miarygodnosci dia pomyzej posta- 
xuionego problemu zapiszemy nast^pujqco: 

P {Sa\Sb,i!^) — )• funkcja wiarygodnosci proby dla ■& . (5.173) 

Jej postaci szukamy, ujykorzystujqc metod^ EFI. Jednak postac informacji Fishera, ktora byiaby miarq 
precyzji estymacji kqta opartej o pomiar Sa, ujynikac b^dzie z jej pierujotnej postaci (2.193) dla ujy- 
miaru proby = 1. 

Skoro rui^c jest estymoruanym parametrem, zatem peini on teraz tak^ rol^ jak parametrem 6 in 
njzorze (2.193), w ktorym, obok podstaxuienia 6 ^ -d, nalezy dokonac nast^pujqcych podstaruien: 

n = N =1 oraz / dy^ (5.174) 
gdzie przestrzeni^ (jednoruymiaroujej) proby jest zbior { — 1, +1} luartosci zmiennej losoiuej Sa- 

Amplitudy pramdopodobienstTjja Qab zdefiniotuane jak zujykle nast^pujqco: 

P{Sa\Sb,^)=qlbm . (5.175) 

Oczekiujana IF parametru ??. Pojemnosc informacyjna kanaiu 5f,) jest romna: 

2 + 1 /«„2 \ 2 + 1 / fl. . \ 2 



, - V 1 dP{Sa\Sb,m ^ ^ 1 /gg-,y V 1 



lab 



PiSa \Sb,^) \ dd ) ^_ ql J ^_ ql, V 

i podsumotuujqc: 

4^/(S,,.?)=4X^g:i(^), 5, = (+,-), gdzie 'zl. = ^ , (5-177) 

gdzie sumoujanie po a odpoujiada calkoujaniu uj informacji Fishera po przestrzeni bazoujej. 
Ziurocmy uujag^, ze t9 uj poujyzszej formule na /{, = / {Sb-, "&) jest ujyznaczone dla konkretnej ujartosci 
d i konkretnej tuartosci Sb rzutu spinu czqstki 2. Zatem jest to pojemnosc informacyjna jednego kanalu 
(i?, Sb) czyli informacja Fishera parametru i? uj tym kanale: 

lF{^) = Ib. (5.178) 

Poujrocmy do ujarunkouj (5.174). Pierujszy z nich oznacza, ze ranga amplitudy pola jest roujna = 1, 
drugi oznacza, ze przestrzen bazowa to teraz dwupunktowy zbior wartosci rzutu spinu czqstki 1 
na kierunek 'a'- W ponizszych uujagach odniesiemy si^ do tych elementouj analizy. 

Uiuaga o sumoujaniu po a uj przestrzeni proby: Jako, ze -d jest parametrem, a pomiary w probie 
sq zujiqzane z obserujacjami Sa, zatem zapis uj (5.177) ujymaga petunego ujyjasnienia. Wyrazenie 
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(5.177) reprezentuje diua roiunania dla diuoch mozliiuych luartosci Sb- Ponieiuaz zmiennq u; pomia- 
rze jest rzut spinu czqstki 1, zatem sumoujanie przebiega po dujoch mozliujych iuartosciach spinu 
Sa = +, — • Tak uji^c, zapis / {Sb, i9) ujskazuje na informacj§ zawartq w przestrzeni proby zmien- 
nej Sa dla czqstki 1 na temat nieznanego kqta t? w obecnosci peiunej nieznanej, lecz ustalonej ujartosci 
rzutu spinu Sb cz^stki 2. 



Caikoujita pojemnosc informacyjna Ii^ dla parametru 'd: Ponieujaz kqt jest parametrem, kto- 
rego ujartosc moze si^ zmieniac uj sposob ciqgiy uj przedziale (0, 27r), stqd zgodnie z (5.177) mamy 
nieskoriczonq liczb^ kanaiouj informacji Fishera ziuiqzanych z ujartosciami i9. Dla kazdego z tej nie- 
skoriczonej liczby kanaiouj sq jeszcze duja kanaiy informacyjne zujiqzane z mozliujymi ujartosciami 
dla Sb- Aby poradzic sobie z takq sytuacjq metoda EFI uiykorzystuje pojedynczq, skalarnq informacji 
(oznaczmy jq Ii^), nazyujanq pojemnosciq informacyjnq, uiproujadzonq u; Rozdziale 2.7. Wielkosc tq 
konstruujemy dokonujqc sumoujania informacji po ujszystkich mozliujych kanalach. Zatem, suma 
przebiegac b^dzie po ujszystkich ujartosciach kqta przy nieznanym rzucie spinu 5;, czqstki 2. 
Tak uji^c, po pierujsze, pojemnosc informacyjna Ink dla jednego kanaiu, ujprotuadzona po raz pieruj- 
szy UJ (2.207), przyjmuje postac: 

Ibk = nSb,^k). (5.179) 

Po drugie, uj ujyniku sumoujania po ujszystkich mozliujych ujartosciach kqta -dk oraz rzutach spinu 
Sb czqstki 2, otrzymujemy calkowitq pojemnosc informacyjnq dla parametru 

+ 

b=- k 

_l_ Itv _|_ Itv Itv 

^^i^ = E / d^I{Sb,d) = ^Y.Y. I d^Q'ab{^)^'^Yl I d^labW, (5.180) 

b=- b=- a=- g a6 

gdzie calkoujanie pojaujia si^ z poujodu zastqpienia sumy dla dyskretnego indeksu k caikoujaniem 
po ciqgiym zbiorze ujartosci parametru -d. Oznacza to, ze po zrozumieniu czym jest pojedynczy A; - ty 
kanai zujiqzany z ujykonujemy uj celu otrzymania caikoiuitej pojemnosci informacyjnej caikotua- 
nie, ktore przebiega zgodnie z (5.157) od do 2tt. W ostatniej linii ujykorzystano (5.177). 
Sumoxuanie uj (5.180) po ab przebiega po ujszystkich mozliujych kombinacjach Iqcznej przestrzeni 
stanouj Sab okreslonej uj (5.152). Indeks '1^' uj oznacza, ze jest to pojemnosc informacyjna jednej 
czqstki, przy czym ujyroznilismy czqstk^ 1, dla ktorej pomiar dokonyujany jest uj analizatorze a. Po- 
jemnosc informacyjna /i^ luchodzi do estymacyjnej procedmy EFI. 



Uujaga o randze = 1. Zachodzi pytanie: Jesli okaze si^, ze tradycyjne formuiy mechaniki kujan- 
toujej dla eksperymentu EPR-Bohm'a pojatui^ si^ dla pomyzej okreslonej estymacji z N = 1 (a tak 
si^ istotnie stanie), to czyzby pomiar odziaiyujania czqstki z aparaturq Sterna-Gerlach'a miai miec 
termodynamiczny charakter oddzialyujania maiego ukladu z termostatem, uj zrozumieniu podanym 
na samym poczqtku Rozdziaiu 5.2.1? W kohcu, jak ujiemy z poprzednich rozdziaiouj, rozuji^zania z 
= 1 odnosz^ si^ do zjaujisk termodynamicznych. 
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5.2.3 Informacja strukturalna. Amplituda pravudopodobienstiua 

Biorqc pod uiuag^ ogolnq postac informacji strukturalnej (3.25) oraz utuagi Rozdziaiu 5.2.2 odno- 
snie konstrukcji postaci Ii^, (5.180), zauiuazamy, ze informacja strukturalna Qi^ dla obsertuotuanej 
czqstki ma postac: 

Qla^Y^j "labW <fabi'lab) • (5-181) 



ah 







Ponizsza analiza ztuiqzana z xuyproujadzeniem amplitud ga6 jest podobna do analizy dla rozkiadu Bolt- 
zmanna uj Rozdziale 5.1. 

Wariacyjna zasada informacyjna: Dla pojemnosci informacyjnej /, (5.180), oraz informacji struk- 
turalnej Q, (5.181) ujariacyjna zasada informacyjna ma postac: 

= (/i. +QiJ = Jd^ k^=0, (5.182) 

gdzie zgodnie z ogolnq postaciq (4.7), g^stosc caikoujitej informacji fizycznej k dla amplitud Qab jest 
rotuna: 

k = ^Yl (lab + \Qlbi^)<fabiQab)) • (5-183) 
ab ^ ^ 

Rozujiqzaniem problemu wariacyjnego (5.182) ujzgl^dem qab jest rownanie Eulera-Lagrange'a (4.12) 
(por. (5.16)): 

d f dk \ dk > 

(5.184) 



Z roujnania (5.184) dla k jak uj (5.183) otrzymujemy, dla kazdego dujuczqstkoujego iqcznego stanu 
spinoujego S'ab: 

1 d{lqli,<fai,{qab)) 

lab = 2 ~ ■ (5.185) 



Ponieujaz qab{'^)'f abilab) jest jaujnie jedynie funkcjq qab, wi^c rozniczka zupeina zastqpila pochodnq 
czqstkoujq po qab ujyst^pujqcq UJ (5.184). 

Zmodyfikoujana obserujoujana zasada strukturalna: Po ujycaikoujaniu (5.180) przez cz^sci, pojem- 
nosc / ujynosi (por. (5.18), (5.20), (5.22)): 

ab 

gdzie 

Cab = [qab (2vr) q'ab (27r) - qab (0) gl, (0)) . (5.187) 
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Z poujodu braku dodatkoujych uji^zouj k = 1, zatem zmodyfikowana obserwowana zasada struk- 
turalna i + Cepr + q = 0, (3.43), jest ze ujzgl^du na (5.186) oraz (5.181), nast^pujqca: 

4^ + Cab + \qlb^abiQab)j = . (5.188) 

ab ^ ^ 

Ponizej przekonamy si^, taCepr = ^'Yl, ^ab = 0. 



Dla kazdego diuuczqstkoujego iqcznego stanu spinotuego Sab, obserujoujana zasada stmkturalna (5. 188) 
ma vui^c postac (por. 5.24): 

- Qabq'ab + Cab + ^qlb^abiQab) = . (5.189) 

Wraz z roujnaniem Eulera-Lagrange'a (5.185), roujnanie (5.189) posiuzy do tuypromadzenia romnania 
generujqcego rozkiad. 



Wyproujadzenia rotunania generujqcego: Wykorzystujqc uj (5.189) ztuiqzek (5.185), otrzymujemy 
(por. (5.25)) dla kazdego diuucz^stkoiuego iqcznego stanu spinotuego Sab- 

-^qab = -^qab^abiqab) + Cab ■ (5-190) 



Zapiszmy poiuyzsze roujnanie w tuygodniejszej formie: 

'^dQab ^ ^(igflj,^afe(gab)) 
9a6 hlb^abiqab) + Cab ' 

z ktorej po obustronnym ujycalkoujaniu otrzymujemy: 



(5.191) 



-yab{^)^abiqab) = ^ " Cab , (5-192) 

gdzie A^f^ jest u; ogolnosci zespolonq stalq. 



Roujnanie generujqce: Podstaujiajqc (5.192) do (5.185) otrzymujemy szukane rozniczkouje roxunanie 
generujqce dla amplitud qab- 

qlb^ = ^ , (5.193) 
b^dqce konsekujencjq obu zasad informacyjnych, strukturalnej i ujariacyjnej. 



Rozujiqzanie rouinania generujqcego: Poniewaz amplituda Qab jest rzeczyujista, lui^c A^j^ tez musi 
bye rzeczyujiste. Podobnie jak uj rozdziale 5.1.3, ponieujaz staia ^4^^ jest rzeczyujista, uji^c mozna jq 
przedstaujic za pomocq innej rzeczyujistej staiej a^fe jako Aab = dab lub Aab = i ciab- Zatem istniejq 
dujie klasy rozujiqzan roujnania (5.193). 



Dla Aab = o-ab, roziuiqzanie (5.193) ma charakter czysto eksponencjalny: 

qabi-^) = B'ab^^^P ( —]+ C'ab^iW ( —] , Aab = CLab , (5.194) 

V aabj \aabJ 
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gdzie stale B^j^ oraz C^f^ rzeczymiste. 



Natomiast dia Aab = i aab, roztuiqzanie (5.193) ma charakter trygonometryczny: 

Qabi^) = ^IfeSin ( — ) + C^fecos ( — ) , Aab = iaab , (5.195) 



, Oab / \ O-ab 

gdzie Uab, B'^ij, C^^ rzeczyujistymi staiymi. 



Warunek niezmienniczosci przy obrocie o 27r: W rozujazanym obecnie przypadku iuartosci i) 
sq kqtem z ograniczonego zbioru (0, 2tt). Zatem z geometrycznej symetrii ukiadu przy obrocie o kqt 
27r ujynika, ze rozkiad P {Sa\Sb, t?) jest roiuniez funkcjq okresoujq zmiennej {}. Ze ujzgl^du na (5.175) 
ujarunek ten oznacza, ze funkcja Qabi^) poujinna bye okresoiua, zatem wybieramy rozwiqzanie o 
charakterze trygonometrycznym, przy czym Funkcje sin oraz cos uj (5.195) sq funkcjami bazoujymi 
tujorz^cymi amplitude praujdopodobienstuja qab{^)- 



Funkcje bazouje na przestrzeni amplitud poujinny bye ortogonalne. Z postaci qa w (5.195) tuynika, ze 
funkcjami bazoujymi sq funkcje 'sin' oraz 'cos'. Ponieujaz Qa jest okreslone na przestrzeni parametru 
1? G (0, 27r), zatem warunek ortogonalnosci funkcji bazowych na tej przestrzeni: 

J d-d sin {'d/aab) cos {^/aab) = (5.196) 



daje po ujycaikoujaniu postac staiych aab'- 
2 

Oaf, = , gdzie nafe = l,2, ... . (5.197) 

nab 



Warunek minimalizacji pojemnosci /: Warunek (5.197) jest ujarunkiem na dopuszczalne ujartosci 
ttab = —iAab (por. (5.195)), ale jak ujidac nie ujskazuje on na zadnq z nich jednoznacznie. Moze to 
nastqpic, gdy ustalimy xuartosc Uab, co uczynimy ograniczajqc rozujazania do zapostulotuanego u; 
Rozdziale 2.7.1 ujarunku minimalizacji informacji kinetycznej / — > min. 



Zacznijmy od luyznaczenia staiej Cab, (5.187). Po ujstaujieniu do (5.187) amplitudy (5.195) z (5.197), 
otrzymujemy: 

^cib = ^ sin{TT Uab) (5.198) 
[B'ab- C'ab) (B'ab + C'ab) cos{Tr Uab) -2B'at,CahSm{Trnab)) =0, gdzie nab = l,2,... , 



sk^d po skorzystaniu z = J d^{Cab — QabQab)' (5-186), oraz roiunania generujqcego (5.193) 
poziualaj^cego xuyeliminoujac g^^,, otrzymujemy uzyteczn^ postac pojemnosci informacyjnej: 



27r 

„j, ^ab J 



ab «^ 



^'Przypomnijmy sobie analiz^ przeproiuadzonq m rozdziale (5.1.3) dla rozkladu energii cz^steczki gazu. Wtedy ze luzgl^du 
na nieograniczony zakres argumentu amplitudy, mybralismy rozmi^zanie o charakterze eksponencjalnym. 
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Nalezy jeszcze ujyznaczyc caik^ uj (5.199): 

27r 2-K 1-K 2tt 







1 j_ 

2 2n 



2n 



= 2tT J d^pi^,Sa\Sb)=2TTP{Sa\Sb) = 27r^=TT , (5.200) 


gdzie UJ pierujszej linii i) ujpieruj skorzystano z definicji amplitudy, = P {Sa l-S'b, (5.175), ii) 

nast^pnie z definicji praujdopodobienstuja luarunkovuego, iii) znouju z definicji praujdopodobienstuja 
ujarunkoujego: 

P(^,5a|5,) = ^^^|^^, (5.201) 

nast^pnie uj drugiej linii z p{{},Sb) = p (S^ r(??) (por. Uujaga ponizej (5.157)) oraz z ujyrazeri 
(5.157), (5.164) oraz uj trzeciej linii z: 

P{Sa\Sb)= r d^p{^,Sa\Sb) , (5.202) 
Jo 

a na koniec z (5.172). 

Wykorzystujqc (5.199), (5.200) oraz Aab = ioafe i (5.197), mozemy ujyrazic informacj^ poprzez 
stale Uab, otrzymujqc: 

^1. = -Qi. = -45]-^ f d'&ql, = AT,Y,^ = ^Y.'^lb^ gdzie n,b = l,2,... , (5.203) 

ab Q ah ^'^b ab 

przy czym drugq z poujyzszych roxunosci, a zatem i pierujszq, otrzymano korzystaj^c z postaci informa- 
cji strukturalnej (5.181), (5.192) oraz z (5.198). Zujiqzek Qi^ = — /i„ jest ujyrazem ogolnego ujarunku 
(3.45) speinienia przez metod^ EFI oczekiujanej zasady strukturalnej (3.35). 

Z poujyzszego zujiqzku ujynika, ze ujarunek minimalizacji /i^ b^dzie speiniony dia: 

nab = l , ha rnin , (5.204) 

dIa doujolnych Sa oraz 5;,. Warunek Uab = 1 zgodnie z (5.197) odpoiuiada nast^pujqcej tuartosci Uab- 

Uab = 2 dla dowolnych 5^ oraz Sb ■ (5.205) 

Sumoujanie uj (5.203) przebiega po ujszystkich Sa i Sb, zatem dla n^fe = 1, otrzymujemy ujartosc 
minimalnq Ii^ : 

+ + 

ha (min) = ^ ^ n^fc = 47r , gdzie n^b = 1 . (5.206) 

a=— b=— 

Tak uji^c otrzymalismy minimainq xuartosc pojemnosci informacyjnej dla parametru i9. 
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Wyznaczenie staiych uj amplitudzie: W tuyrazeniu (5.195), ktore dla Uab = 2 przyjmuje postac: 
qM = B,, sin (0 + Cl, cos , (5.207) 

tuyst^pujq jeszcze state B'^j^ oraz C'^^, ktore rotuniez musimy tuyznaczyc. Wyznaczymy je korzystajqc 
z ujczesniej ustalonych w (5.158), ujartosci iqcznego praujdopodobienstuja ujarunkoujego P {Sab\'&) 
dla = 0. 

Wyrazmy lupieruj P (Sahl^?) poprzez amplitude qab- 

P {SabW = P (SaSbW) = ^i^j^ = p (Sa\Sb, ^) 

r[tf) ryu) 

= p {Sa\Sb, p {sm = qimp {sm = \ ^im , (5.208) 

gdzie skorzystano z (5.164). Z roxunania (5.208) luynika, ze: 

qabm=0 jesli P{Sab\^) = 0. (5.209) 

Korzystajcjc z (5.209) oraz P (+ + |0) = P (- - |0) = 0, (5.158), i tustaiuiajcic (5.207) dla t9 = do 
(5.208), otrzymujemy: 

C++ = C'__ = . (5.210) 

Ponadto, korzystajqc z symetrii geometrycznej eksperymentu, P {S^ = P {S oraz P {S+j^\-d) 

= P {S zapisanej uj (5.166), otrzymujemy: 

= b'__ oraz P+_ = b'_^ , (5.211) 

oraz 

C+_ = Cl+ . (5.212) 

Analiza z ujykorzystaniem metryki Rao-Fishera: Ponizej przekonamy siq, ze ujyznaczenie pozosta- 
iych staiych oraz C'^^^ ujymaga dodatkoujego zaiozenia, odnosz^cego si^ do postaci metryki Rao- 
Fishera na przestrzeni statystycznej 5, szukanego statystycznego modelu. 

Szukanym rozkladem praujdopodobienstuja uj eksperymencie EPR-Bohm'a jest dyskretny rozklad 
(5.153) okreslony na przestrzeni zdarzeh SaSb = Sab G ^ab, (5.152), i unormoujany zgodnie z (5.154) 
do jednosci. Zatem zbior mozHujych ujynikouj to: 

z = a6 =(++), (—),(+-),(-+) . (5.213) 

Aplitudy praujdopodobienstuja ztuiqzane z rozkladem (5.153) majq zgodnie z (5.208) postac: 
1 



qi = qabi^) = VPiSabW) . (5.214) 
Zgodnie z (5.207) amplitudy qab{'^) majq nast^pujqce pochodne: 
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Dla = 4 ujynikouj (5.213), z ogolnego zujiqzku (2.173) okreslajqcego metryk^ Rao-Fishera gab = 
^Ylf=i M^ffi ' otrzymujemy po skorzystaniu z (5.214) oraz (5.215) nast^pujqcq postac metryki g^^ 
indukomanej z rozkiadu (5.153): 



i=l 



= In ((^'abf + - sin\^) - B:,c:,sm(^?)) (5.216) 

ab ^ ^ 

na jednoujymiaroujej przestrzeni statystycznej 5 parametryzotuanej w bazie ??. 

Po skorzystaniu z (5.211), postac metryki g^^{€), (5.216), promadzi dla i? = do ujarunku: 

= 0) = ^ ^^(Blb)' = + (S;-)' dla ^9 = , (5.217) 



2 

ab 



natomiast dla = vr do luarunku: 

= ^) = \ E(^afe)' = dla ^ = vr , (5.218) 

ab 

gdzie skorzystano roruniez z (5.210). 

Centralne zalozenie statystyczne dla eksperymentu EPR-Bohm'a: Zaiozmy, ze w eksperymencie 
EPR-Bohm'a metryka Rao-Fishera g^^ na S jest niezalezna od wartosci parametru d, tzn.: 

g-d-di"^) = = const. . (5.219) 

W szczegolnym przypadku ruarunek (5.219) oznacza, ze g-&^{'d = 0) = g^^{'& = tt), co utuzgl^dniajqc 
uj zaieznosciach (5.217) oraz (5.218) daje: 

(i3;„)2 = (c;_)2>o. (5.220) 

Warunek ten oznacza, ze / 0, gdyz uj przecimnym mypadku, tzn. dla = 0, z marunku 
(5.220) oraz z (5.210) otrzymalibysmy zeroiuanie si^ xuszystkich ujspoiczynnikouj B'^^ oraz C^^, co 
odpoiuiadaloby trymialnemu przypadkouji braku rozmiqzania dla zagadnienia EPR. Zatem otrzymu- 
jemy: 

C = C+_ = Cl+ / , (5.221) 
gdzie roujnosci mspoiczynnikom mynika z (5.212). 

W koncu niezaleznosc g^&rQ od martosci t?, (5.219), daje po skorzystaniu z postaci g^^, (5.216), oraz 
z ujarunkouj (5.210), (5.211) i (5.212), luarunek: 

E [^C'a^)' - (^a^)') = 2((C^;-)' - {B^+f - {B^-f) = , (5.222) 

ab 

czyli xuarunek pokrymajqcy si^ z (5.220) oraz: 

E B'ab C'a, = 2(B;_ = . (5.223) 
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Warunek (5.223) turaz z (5.221) oznacza: 

B'^_ = b'_^ = , (5.224) 

gdzie skorzystano roiuniez z (5.211). Po utuzgl^dnieniu (5.224) uj (5.222), otrzymujemy: 

= . (5.225) 

W koricu zauxuazmy, ze ze inzgl^du na (5.224) oraz (5.221), marunek istnienia nietrytuialnego rozujiq- 
zania oznacza, ze: 

B = 5++ = b'__ / 0, (5.226) 
gdzie ponotunie w roiunosci skorzystano z (5.211). 

Podstaujiajqc otrzymane ujyniki dia luspoiczynnikouj B'^^ oraz C^^ do (5.207), otrzymujemy: 

q++{-d) = =Bsm{^/2) , q^+{'d) = q+^{'&) = Ccos(i9/2) . (5.227) 

Jak ujidac, rorunosc ujspoiczynnikouj w zujiqzkach (5.221) oraz (5.226) jest odbiciem rotunosci odpo- 
ruiednich amplitud, ujynikajqcej z symetrii odbicia przestrzennego (5.166) oraz tuzoru (5.208). 

Musimy jeszcze ujyznaczyc stale B oraz C. Z poujodu luarunku normalizacji pratudopodobieristuja 
P {SaSb\'&), (5.154), otrzymujemy ze ujzgl^du na (5.208) rouinanie: 

I {ql+{^) + ^_(^) + qUi^) + qI^{^)) = 1 • (5.228) 

Korzystajqc z (5.227) i (5.228) mamy: 

sin^ (i9/2) + cos^ (i?/2) = {B^ - C^) sin^ (i?/2) + = 1 . (5.229) 

Koncouja postac amplitud: Poroujnuj^c ujspoiczynniki stoj^ce przy odpoujiednich funkcjach zmien- 
nej •& po leujej i praujej stronie drugiej roujnosci poujyzszego ujyrazenia, otrzymujemy: 

^2 = = 1 , (5.230) 

CO po ujstaujieniu do (5.227) daje ostatecznie rozuji^zanie roujnania generujqcego (5.193): 

q++{'d) = q—i-d) = ±sin(T?/2) , q^+{^) = q+-{^) = ±cos(i?/2) . (5.231) 

Wynik na praujdopodobienstujo uj eksperymencie EPR-Bohm'a: Podstaujienie amplitudy (5.231) 
do P {Sab\'&) = \ Qabi'^) ' (5-208), daje ujynik na iqczne praujdopodobienstujo otrzymania okreslonej 
kombinacji rzutouj spinouj przy zadanej ujartosci kqta 

P{++\i)) = P{--\i}) = ^sm^{i)/2), P(+- = P(- + |t?) = ^cos2(t?/2), (5.232) 

htoryjest przewidDwaniem mechaniki hwantowej [56]. 

Na koniec, podstatuiajqc ujartosci otrzymanych ujspoiczynnikouj i?^^ oraz C^^ do (5.216), otrzymu- 
jemy ujartosc staiej (7^^ dla jedynej skiadoujej metryki Rao-Fishera uj (5.219): 

gi^'&i^) = 9i}& = 1 , (5.233) 
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ktora zgodnie (2.89) jest metryk^ samo-dualnego (Euklidesoiuego) ukiadu tuspoirz^dnych i? na jedno- 
ujymiaroujej przestrzeni statystycznej S. 

Roznica pomi^dzy przedstairionym ujyproiuadzeniem a analizq w [8]: Wynik (5.232) lu ramach me- 
dody EFI, zostai oryginalnie myproiuadzony w [8], jednakze poujyzszy sposob ujyproiuadzenia rozni 
si§ w dujoch miejscach. Po pierujsze, luarunki brzegoiue zostaiy uj^tne uj sposob bardziej przejrzysty 
[16], a po drugie uj [8] odiuoiano si^ do tuiasnosci ortogonalnosci ujproiuadzonych tarn ktuantoiuych 
amplitud, o czym mspomnimy na koncu rozdziaiu, a czego iv poujyzszym mypromadzeniu unikni^to, 
njproujadzajqc uj to miejsce warunek niezaleinosci metryki Rao-Fishera od wartosci parametru -d. 

Wnioski: W (5.171) tuyznaczono i^czne pratudopodobienstujo P {Sab) = I- Z drugiej strony uj (5.165) 
otrzymano P{Sb) = 1/2 (i analogicznie P(S'a) = 1/2), z czego ujynika, ze: 



ktory to tuarunek oznacza niezaleznosc spinoujych zmiennych 5a oraz Sb- 

Natomiast z (5.232) luidac, ze efekt korelacji spinu zmienia si^ bardzo mocno ujraz z ujartosci^ kqta ?? 
i UJ samej rzeczy poroujnanie (5.232) z (5.163) i (5.164) daje ujarunek: 



Relacje (5.234) oraz (5.235) nie sq jednak uj sprzecznosci. Istotnie, ponieiraz prarudopodobieristuja 
P (Sab), P {Sa) oraz P (Sb) sq ujyznaczone na skutek usrednieri po ujszystkich ruartosciach kqta {}, 
zatem mozna byio oczekiiuac, ze po dokonaniu tych usrednieri korelacja zmniejszy si^. Zauiuazmy, ze 
UJ (5.234) nie ma zaleznosci od i9, co luynika z tego, ze praiudopodobieristujo P (Sab) z definicji okresla 
roujnoczesne pojaiuienie si^ kombinacji rzutouj spinouj Sab niezaleznie od informacji o zmiennej kq- 
toujej 1?. Podobnie, P (Sa) oraz P {Sb) okreslajq pratudopodobieristuja odpoujiadajqcych im zdarzeri 
UJ sytuacji pozbycia si^ informacji o kqcie 

Roujnanie (5.234) mouji uji^c, ze uj sytuacji usrednienia po kqcie i9, czyli ujtedy gdy zmienna ta jest 
pod kontrolq, zmienne Sa oraz Sb rzutouj spinouj sq niezalezne, uji^c sq roujniez caikoujicie niesko- 
reloujane. 

Natomiast tuynik (5.235) dla eksperymentu EPR-Bohm'a zachodzi tutedy, gdy dokonujemy estymacji 
kqta metodq EFI, czyli uj sytuacji oczyujistego braku usrednienia po -d. 

Poroujnanie stujierdzen o usrednieniu: Poujyzszy ujynik ma interesujqcq flzycznq interpretacj^. Mia- 
noujicie tujierdzenie Ehrenfesta mouji, ze srednie ujartosci kujantoujych operatorouj sq roujne ich kla- 
sycznym odpoujiednikom. W jego sujietle ujyrazenie (5.234) mouji, ze uj przypadku usrednienia po 
k^cie 'd stany splqtane EPR-Bohm'a, na poujrot ulegajq klasycznej separacji. W analizie statystycznej 
moujimy, ze po tuyeliminoujaniu ujplyuju zmiennej trzeciej, ktorq jest kqt -d, okazaio si^, ze zmienne 
rzutouj spinouj Sa i Sb sq nieskorelotuane. 

Uujaga o ujyproujadzeniu Friedena [8]: Warunek niezaleinosci ujyproujadzenia formui (5.227) od 
mechaniki kujantoujej mozna by nieco osiabic, tzn. na tyle, aby statystycznosc teorii byia dalej uji- 
doczna. Frieden uczynii to, jak nast^puje [8]: 

Pokazmy, ze qab{'&) jest proporcjonalna do "kwantowef amplitude ^ab(^), parametryzoujanej para- 
metrem -d dla stanoiu (5.152). Niech P {Sab, jest praujdopodobienstujem pojatuienia si^ konfigu- 



P {Sab) = P {Sa) P {Sb) 



(5.234) 



P {SabW ^ P {SaW) P {SbW) . 



(5.235) 
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racji (a, b) rzutu spinouj, podczas gdy parametr ujynosi Nie jest to praiudopodobiensttuo iqczne 
zajscia zdarzenia: "pojaujiia si^ konfiguracji (a, b) rzutu spinouj oraz kqt gdyz ten ostatni nie jest 
zmienn^ losoujq. 



Funkcj^ ipabi^) okreslimy tak, ze ktuadrat jej moduiu speinia ziuiqzek: 

li'abm^ = li^abi^lSab) f^p{^\Sab) = ^jfg'^ , (5.236) 

tzn. jest praiudopodobieristujeni, ze skoro pojaiuiiaby si^ iqczna konfiguracja spinoiu ^ab, to ujar- 
tosc kqta ujynosi -d. 

Problem polega na tym, ze qab{'&) opisuje losouje zachoujanie zmiennej spinoujej 5^, a nie co ozna- 
cza, ze Qabi"^) jest amplitude typu ip^{ab), a nie V'afe(^)- 

Aby pokazac, ze qabi"^) jest proporcjonalna do '>pab{'&)^ skorzystajmy z (5.236), a nast^pnie z tmierdzenia 
Bayesa oraz definicji praiudopodobienstuja ujarunkoiuego: 

P{Sab,^) P{Sabmr{^) P{Sabmr{^) P{Sa\Sb,^)P{Sb)r{^) 



P{Sab) P{Sab\Sb)PiSb) P{Sa\Sb)P{Sb) P(S J 5f, )P 



P{Sa\Sb) ■ 

Korzystajqc z (5.157), (5.172) oraz (5.175), otrzymujemy tui^c z (5.237), ze 



(5.237) 



\i^abm\^ = -qlb{'&), (5.238) 
vr 

skqd 

4^ab{^) = — qabm , aeR. (5.239) 

TT 

Zatem, ipab{^) oc qab{'&), co oznacza, ze^^, skoro pojaxuiia si^ tqczna konfiguracja spinouj Sab, to am- 
plituda praujdopodobienstuja ipab{'&), ze ujartosc kqta ujynosi d, jest proporcjonalna do amplitudy 
praujdopodobienstuja qab{'&) zaobserujoujania rzutu spinu Sa czqstki 1 pod ujarunkiem, ze rzut spinu 
czqstki 2 ujynosiiby Sb, a kqt -d. Zdanie to jest ujyrazem splqtania, ktore pojaujiio si^ u; kujanto- 
mechaniczno opisie eksperymentu EPR-Bohm'a. 

W koncu, ze ujzgl^du na (5.238), amplitudy qab{'&) proporcjonalne do amplitud ipab{'&)- Zatem 

Frieden zarzqdai ortogonalnosci amplitud kujantoujych i , skqd automatycznie ujynikn^ia 

ortogonalnosc amplitud (7++ oraz : 

j'd'dq++q+^ = y"d?9S++sin(i9/2) sin (i?/2) + C7^„ cos (i9/2) = 0, (5.240) 



CO pozujoliio na tuyproujadzenie zerotuania si^ B'^_ oraz (5.224), a dalej (post^pujqc juz jak 

poujyzej) otrzymanie formui (5.232). 



'^W mechanice kiuantoiuej poiuiedzielibysmy, ze ipabij)) oznacza amplitude pratudopodobieristma zdarzenia, ze inartosc 
kqta ujynosi j9, o ile pojauiilaby siq Iqczna konfiguracja spinou; Sab- 
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5.2.4 Niepeujnosc vuyznaczenia kqta 

Istnieje jeszcze jedna sprama dotyczqca analizy estymacyjnej, opisanej potuyzszymi rachunkami, 
ktora tuymaga podkreslenia. 



Rozkiad eksperymentalny: Otoz uj rzeczyujistym pomiarze badacz otrzymuje ujartosci rzutu spinu 
Sa z okreslonymi cz^stosciami, ktore oszacotuaniami rozkiadu praiudopodobienstiua (5.232), co z 
kolei pozujala na punktoiue oszacoiuanie kqta i9. 

Analiza statystyczna metody EFI, ktora doprotuadziia do (5.232) jest, zgodnie z postulatem EFI, spratuq 
ukiadu dokonujqcego probkoujania przestrzeni pomiaroujej poiozen i estymacji oczekiiuanych para- 
metrouj^''. Jednak jako metoda statystyczna i ona podlega pod ograniczenie Rao-Cramera do- 
kladnosci oszacowania estymowanego parametru, htorym w tym przypadku jest {}. Sytuacja ta ma 
nast^pujqce konsektuencje. 



Wetun^trzny blqd estymacji metody EFI parametru Zauujazmy, ze nieroujnosc Rao-Cramera ma 
postac, CTg F > l/Ip , (2.115), gdzie tym razem estymator F = -d.X nierorunosci tej otrzymujemy 
ujarunek na ruariancj^ estymatora i) kqta 

gdzie = h jest informacjq Fishera (5.178), a nie pojemnosciq informacyjnq /i^, (5.180), czy lu 

konsektuencji jej tuartosciq minimalnq (5.206). Bez analizoruania postaci estymatora nieroujnosc 
Rao-Cramera (5.241) okresia DORC dia jego xuariancji, o ile tyiko estymator ten jest nieobciqzony. 

Wiemy tez, ze ponieujaz pojemnosc informacyjna jest sumq po kanaiach z odpoujiadaj^cych im in- 
formacji Fishera, uji^c: 

lu > If{^) . (5.242) 
Z (5.242) oraz z (5.241) otrzymujemy: 

Ponietuaz pojemnosc kanaiu Ji^ ujediug (5.206) luynosi: 

lu = , (5.244) 
uji^c podstaujiaj^c tq luartosc do nieroujnosci (5.243) otrzymujemy: 

> ^ « 0.08 rad^ . (5.245) 

Wniosek: Nierotunosc (5.245) stiuierdza, ze obsertuacja jednej luartosci rzutu spinu przy hompletnej 
nieznajomosci kqta ■§ (stqd (5.157)) daje o nim maiq, lecz skohczonq informacj^. Biqd jego estymacji 
^0, 08 rad = 0, 28 rad jest dose duzy, co jest zujiqzane z piaskq funkcjq "nieujiedzy" r{'d) okreslonq 
UJ (5.157). 



■^Jest tak LU calej analizie EFI nie uujzgl^dniajqcej irpiyiru urzqdzenia pomiaromego. 
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5.2.4.1 Wpiyuj zaszumienia pomiaru 

Analiza EFI uj obliczu pomiaru i piynqcego z tego faktu zaszumienia danych ujeujn^trznych EFI nie 
jest przedmiotem tego skryptu. Zainteresoujany czytelnik znajdzie omoujienie tego tematu u; [8, 16]. 
Ponizej zamieszczam ujniosek z analizy Mroziakieujicz [16] dotyczqcy tego problemu dla poujyzszej 
analizy eksperymentu EPR-Bohm'a. 

W pomiarze stanu ukiadu przez zeiun^trznego obsertuatora, otrzymujemy dane zaszumione przez 
uklad pomiaroujy. Tzn. dane pomiarouje rzutu spinu (oznaczmy je So) sq generoujane przez prauj- 
dziuje ujartosci ujielkosci Sa, Sb,!} iv obecnosci szumu aparatury pomiaroujej. Szum ten poujstaje co 
praujda uj urzqdzeniach Sterna-Gerlacha a oraz b, ale ze ujzgl^du na zaiozenie podane na samym 
pocz^tku Rozdziahi 5.2.1, z innych przyczyn niz (przyj^te jako roujne zeru) fluktuacje rzutu spinu. 

IF uujzgl^dniajqca zaszumienie: Uzyskana przy tych danych informacja Fishera Izasz o parametrze 
??, uujzgl^dniajqca zaszumienie pomiarouje, jest generoujana przez informacja Fishera /f(^) = h 
(5.178). W tym sensie informacja Fishera If{^), (5.178), procedury estymacyjnej EFI jest cz^sciq 
informacji, ktora przejawia sig w pomiarze. Zatem obok nieroujnosci (5.242) zachodzi roujniez: 

If{^) > haszm . (5.246) 

Ze ujzgl^du na to, ze haszi^) ujchodzi uj (5.243) uj miejsce If{'&), tuarunek ten oznacza pogorszenie 
jakosci estymacji uj porotunaniu z (5.245). 

5.2.5 Informacja Q jako miara splqtania 

Tak jak uje ujszystkich problemach estymacyjnych rozujiqzanych metodq EFI, tak i uj ekspery- 
mencie EPR-Bohm'a ujykorzystano przy estymacji kqta -d, obserujoujanq zmodyfikoujanq informa- 
cyjnq zasad^ strukturalnq V + C + Kq = 0, (3.43), ktora ze ujzgl^du na «; = 1 uj eksperymencie 
EPR-Bohm'a^"^, daje na poziomie oczekiujanym zujiqzek Qi^ = —h^, (5.203), zgodnie z ogolnym uja- 
runkiem (3.45) metody EFI. 

Dost^pnosc pomiarouja Ii^: Ponietuaz nie mierzony byi stan czqstki 2, tzn. rzut spinu Sb w cza- 
sie naszej analizy mogi przyjqc ujartosc + lub — , zatem pojemnosc informacyjna jest informacjq o 
kqcie zaujartq uj obserujacji rzutu spinu czqstki 1 dokonanej przez uklad i zgodnej z dokiadnosciq 
do szumu z obserujacjq dokonan^ przez zeuinQtrznego obsertuatora^^. 

Nieobserujoujalna ireiun^trza struktura ukiadu odbita uj Qi^: Natomiast informacja strukturalna 
Qi^ (5.181) dla czqstki 1, jako pozostaia cz^sc informacji fizycznej K, jest informacjq zaujartq uj nie- 
obserujoujanej ujeujn^trznej strukturze informacyjnej caiego ukiadu. Sugeruje to istnienie iqcznej, 
nieseparowalnej informacji strukturalnej dla czqstek 1 i 2. Zatem informacja o igcznej strukturze 
ukiadu, to nie to samo co suma informacji o jego skiadoujych. 

Splqtanie stanouj czqstek: Ze ujzgl^du na Qi^ = — przestrzeh danych odbita uj Ii^, tzn. obser- 
ujacje cz^stosci rzutu spinu cz^stki 1, jest na poziomie informacji, zujiqzana z ujeujn^trzq przestrzeni^ 

'*Dodatkoujo dla eksperymentu EPR-Bohm'a C = Cepr = 0, zgodnie z (5.198). 

'^Zaszumienie z aparatury Sterna-Gerlacha, o ktorym uispomniano pomyzej, dla uproszczenia pomijamy. 
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konfiguracyjn^ ukiadu odbitq uj Qi^. Co praiuda, ze ujzgl^du na brak bezposredniego ujgl^du tu re- 
lacje lueujn^trz ukiadu, mozemy jedynie ze skonczonq dokiadnosciq (Rozdziai 5.2.4) ujnioskoujac o 
kqcie 'd, jednak sam fakt mozliujosci takiego ujnioskoujania okresla sytuacj^ nazyujanq splqtaniem 
stanow obu czqstek. 

Wniosek ogolny: Wynik ten proujadzi do stujierdzenia, ze strukturalna (ujeujn^trzna) zasada informa- 
cyjna / = —kQ, stosoujana dla kazdego rozujazanego problemu EFI, opisuje^^ splqtanie przestrzeni 
danych obserujoujanych^^ z nieobserujoujanq konfiguracjq ukiadu czqstek^^. Postuluje to ujykorzy- 
stytuanie EFI jako formalizmu do predykcji ujystqpienia stanoiu splqtanych i to nie tyiko uj przypadku 
problemu EPR-Bohm'a. Tak uji^c, informacja strukturala Q jest informacjq o „spl§taniu" ujidocznym 
UJ korelacji danych przestrzeni pomiaroujej z przestrzeniq konliguracyjnq ukiadu. 

Na koniec ujspomnijmy, ze inne traktoujanie informacji lizycznej K uj [8] niz uj obecnym skrypcie, 
spraujia, ze ujnioski tam otrzymane sq inne^''. 



W przypadku braku separoujalnosci I oraz Q na sumy odpoujiednio pojemnosci informacyjnych oraz informacji struk- 
turalnych, mlasciiuych dla podukladoin. 
^''Na przyklad, cz^stosci rejestracji okreslonych rzutouj spinu Sa w eksperymencie EPR-Bohm'a. 
'®Na przyklad, kqtem ■& w eksperymencie EPR-Bohm'a. 

''Wnioski lu pracy [8] nast^pujqce: Przekaz [zmiqzanej] informacji J do czqsthi obserwowanej ujzbudza martosc spinu 
Sa do poziomu danej m probce, zgodnie z koncoujym pramem (5.232). Oznacza to, ze przekaz informacji spraujia, ze czqstka 
spelnia koncouje praujo (5.232) [opisuj^ce zachoujanie si^] spinu. Przyczyn^ jest jakis nieznany mechanizm oddzialyma- 
nia, bye moze peuina "bogata i zlozona struktura, ktora moze odpomiadac na informacji i kieromac zgodnie z tym, smoim 
mlasnym ruchem" . W ten sposob, przekaz [zmiqzanej] informacji J mi^ze z sobq stany spinome nieobsermouianej i obser- 
momanej czqstki. A zatem J (zgodnie z uiymogiem) "nadaje postac" rulasnosciom spinu nieobserujoujanej cz^stki. 
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Rozdzial 6 

Zakohczenie 



Celem skryptu byia prezentacja uogolnienia MNW oraz zastosotuania IF tu jej cz^sci toniosko- 
tuania statystycznego dotyczqcego estymacji niepartametrycznej metodq EFI, zaproponoiuanq przez 
Friedena i Soffera do opisu zjaujisk fizycznych i ekonofizycznych. Podstaiuy takiej analizy statystycz- 
nego opisu zjaujisk zostaiy ujprotuadzonych uj latach 20 ubiegiego ujieku przez Fishera. 
Poczqtkoiuo Fisher inproiuadzii MNW poszerzonq o poj^cie IF w celu rozruiqzania problemu esty- 
macji punktotuej i przedziaiomej parametru rozkladu zmiennej losoiuej lu sytuacji maiej proby. Jego 
statystystyczna metoda doboru modeli, konstruotuana niezaleznie od oruczesnie roziuijanych teorii 
fizycznych, okazaia si^ jednak si^gac o ujiele dalej, uj obszar estymacji roujnah fizycznych teorii pola, 
przy czym okazaio si^, ze ujielkosc (maiej) proby jest uj tej estymacji cechq charakterystycznq modeh. 
Celouji temu posuji^cona jest gioujna cz^sc niniejszego skryptu. 

Jestesmy uj punkcie, w ktorym mozna juz dac petune tust^pne podsumoujanie metody EFI jako pro- 
cedury statystycznej budoujania modeh. Jest uji^c EFI metodq statystycznej estymacji roujnah ru- 
chu teorii pola lub roujnah generujqcych rozkiady fizyki statystycznej. Gdy szukane roujnanie ruchu, 
ujyestymoujane metodq EFI poprzez rozujiqzanie jej roujnah (3.43) oraz (3.44), zostalo otrzymane, 
ujtedy moze bye dalej proujadzone poszukiujanie rozkladu pratudopodobiehstuja na analitycznych 
tuarstujach przestrzeni statystycznej S, tzn. na (pod)rozmaitosci uj 5 z metrykq Rao-Fishera. 
Moze si^ zdarzyc, ze Iqczny rozklad praujdopodobiehstuja jest analizoujany przez EFI na calej poloze- 
nioujo-p^doujej przestrzeni fazoujej ukladu^ i to dla uji^cej niz jednego pola. Ma to np. miejsce, gdy 
obok pola Diraca, obecne jest roujniez pole cechoujania (Rozdziai 4.3.3.1). Wtedy na ujarstujie roz- 
kladu fermionoujego, uj jego pochodnych koujariantnych, pole cechoujania^ musi bye samospojnie 
ujzi^te pod uujag^. 

Sedno metody EFI jest zatuarte uj ogolnej postaci informacji fizycznej K zadanej przez rotunania (4.6) 
oraz (4.7) (lub (4.8)). Jest ona funkcj^ zarotuno obserujoiuanej informacji strukturalnej cf „((7n(x)) jak i 
amplitud (7n(x) (lub V'n(x)) rozkladouj, ujraz z ich pochodnymi. Przy tak ogolnym zrozumieniu K, roz- 
norodnosc roujnah EFI jest konsekujencjq roznych ujarunkouj ujst^pnych dyktoujanych przez fizyk^. 
Mogq si^ one ujyrazac np. poprzez roujnania ciqglosci, ktore same sq ujynikiem estymacji statystycz- 
nej [10] (Rozdziai 3.4), petune symetrie charakterystyczne dla zjaujiska (Rozdziai 2.7.1) oraz ujarunki 
normalizacyjne. Wst^pne zaiozenia fizyczne mogq, poza eujentualnosciq naiozenia dodatkotuych rouj- 
nah ciqgiosci, ujskazyujac roujniez na zastosoiuanie jedynie ujariacyjnej zasady informacyjnej, jak to 

'Gdyby na przyklad chciec ujyznaczyc metodq EFI l^czny rozklad energii i p^du cz^stki gazu. 
^Dla brzegoujego rozkladu pola cechomania ujyznaczonego z iqcznego rozkladu ujszystkich pol. 
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ma miejsce lu przypadku roiunania Kleina-Gordona dla pola skalarnego (Rozdziai 4.3.2), bqdz na obie 
zasady i ich samospojne rozujiqzanie, jak to miaio miejsce u; pozostaiych przypadkach. 

Podsumoujujqc, przeszlismy u; skrypcie przez trzy etapy statystycznej rozbudoujy zastosomania MNW 
oraz IF. Na pieriuszym, ujst^pnym etapie, przedstaujiono zastosotuanie MNW oraz IF w analizie do- 
boru modeli (Rozdziai 1) oraz omotuiono podstaujy podejscia geometrii rozniczkoiuej do konstrukcji 
przestrzeni statystycznej, obrazujqc poznany aparat statystyczny przykiadami estymacji modeli ekspo- 
nentialnych. Na drugim etapie, luprotuadzono poj^cie entropii tuzgl^dnej i pojemnosci informacyjnej 
oraz ujproiuadzono stmkturalnq i tuariacyjnq zasady informacyjnq (Rozdziai 2-3) metody EFI, a w 
trzecim przedstaiuiono luykorzystanie tych poj^c do ujyproiuadzenia podstatuotuych rotunan modeli 
fizycznych (Rozdziaiy 4-5, Dodatek 7.3.1-7.3.2), tuiqczajqc uj to przykiad ekonofizycznego opisu zja- 
ujiska (Rozdziai 5.1.4). 
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Rozdzial 7 



Dodatki 



7.1 Dodatek: Zasada nieoznaczonosci Heisenberga 

Ponizsze ujyproujadzenie zasady nieoznaczonosci Heisenberga zostaio przedstaujione uj [8, 19]. 
Zasada Heisenberga stujierdza, ze uj okreslonej chujili czasu t nie mozna z doujolnq dokiadnosciq 
tuyznaczyc jednoczesnie poiozenia y i p^du jp czqstki, tzn. ze polozenie i p^d cz^stki sq rozmyte, co 
mozemy zapisac nast^pujqco: 

^h4>{^y^ (7-1) 

gdzie i dp sq ujariancjami poiozenia i p^du czqstki ujzgl^dem ich ujartosci oczekiujanych 9 oraz 
6p. 

Wyproujadzenie nieroujnosci (7.1) dia pola rangi N = 2 

Zaiozmy, ze dokonujemy estymacji tylko uj jednym przestrzennym kanale informacyjnym przy 
zaiozeniu, ze pozostaie czasoprzestrzenne parametry rozkiadu sq znane. Poujyzsza relacja moze bye 
ujyproujadzona przy odujoianiu si^ do ujiasnosci informacji Fishera. Wartosci poiozenia y zmiennej 
Y sq rozm})te (bqdz fluktuujq) ujokoi jej ujartosci oczekiujanej 9, skqd ujartosci x G Af zmiennej 
odchylen X speiniajq (jak zujykle uj skrypcie), zujiqzek: 

X = y - . (7.2) 

Zaiozmy, ze jest speiniona nieroujnosc Rao-Cramera (2.115): 

al-lF{9)>l, gdzie al = E({9{Y)-9f] , (7.3) 



gdzie If{Q) jest informacjq Fishera parametru 9 dla pojedynczego pomiaru (z poujodu odujoiania si^ 
do skalarnej ujersji tujierdzenia Rao-Cramera), ktora po skorzystaniu z postaci kinematycznej (3.51) w 
Rozdziale 3.3, ma postac: 

Rozujazmy zespolonq amplitude ip, (3.53), dla pola rangi N = 2: 

V'(x) = Vi(x) = (gi(x) +ig2(x)) , (7.5) 
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ktora ma jako cz^sc rzeczyujistq i urojonq dujie rzeczyujiste amplitudy qi, i = 1,2. Zaiozymy, ze 
N = 2 - Luymiaroiua proba dla zmiennej odchylen X jest prosta, skqd amplitudy gi(x), i = 1,2, 
takie same i roujne q{x): 



Qi{x) = 92 (x) = g(x) . 



(7.6) 



Zespolonq funkcj^ ip (x) mozna zapisac poprzez jej transformat^ Fouriera, przechodzqc z reprezentacji 
poiozenioujej x do p^doiuej p: 

1 



V'(x) = -^J= J Hp) exp(ipx) , 
gdzie p jest rozmyciem (fluktuacjq) p^du yp tuokoi jego martosci oczekimanej 9p , tzn.: 

p = yp - 6'p , 

a p^d czqstki jest mierzony w tej samej chiuili co jego poiozenie. 
Dla amplitudy N = 2 pojemnosc informacyjna /, (3.60), ma postac: 



(7.7) 



(7.8) 



1 = 8 dx 



8 / dx 



dx dx 
Przedstaujiajqc ip uj postaci: 

V'(x) = |^(x)| exp(i5(x)) 

i ujykonujqc rozniczkoujanie: 

dx dx 
mozemy (7.9) przeksztaicic nast^pujqco: 



# (x) 



dx 



+ i IV' (x)| e 



dS (x) 
dx 



(7.9) 



(7.10) 



(7.11) 



I = 8jdx 



+ l^(x)l^(^ 





2 


dx 




/d|V(x 




I dx 




(d\i>{ 






2 f dS(x)\ 



^ di/i* (x) dip{x) 



8 J" dx 

8/ dx /^^e-iS{x) _ ^ 1^ e-^^W^) (^^jgs^e^^W + i |^ (x)| e^5{x)rfSM 
8/dx [f + z IV^ (x)| e^^W«^^ - z 1^ e^^W^^+ 

2 



(7.12) 



8 / dx 



Zajmijmy si^ teraz piertuszym skiadnikiem pod ostatnia caikq uj (7.12). Ponieujaz norma amplitudy 
'0 jest roujna: 



2 (9i + I2) > 



zatem: 



dx 



1 ( d 



2\dx 



Ql + Qi 



\Qi = Q2 



dq 

'^l=ld^ 



(7.13) 



(7.14) 



Podstaujiajqc poujyzszy ujynik do caiki (7.12) i korzystajqc z (7.4), otrzymamy nast^pujqcq roujnosc: 



8 / dx 



di; (x) 



dx 



8 / dx 



"^("^'^ +|^(x)|^ 



dx 



dg (x) 
dx 



8 y ^^x(^^) +8 J dx|V(x)p 



dS (x) 
dx 



2If + 8E 



dS (x) 
dx 



(7.15) 
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Z (7.15) oraz (7.9) tuynika uji^c nast^pujqca nieroujnosc: 



2If <I lub If <4: dx 



(iV(x) 



(7.16) 



Wykorzystujqc transformat^ Fouriera (7.7), otrzymujemy z (7.16) po przejsciu do reprezentacji p^do- 
ujej: 



gdzie {(j) (p)P jest brzegotuq g^stosciq pratudopodobieristtua P{p) odchylen p^du. 
Zatem caika po praujej stronie (7.17) jest ujartosciq oczekiiuanq -E'(p^) dla p^: 

2 /o\ 2 



(7.17) 



(7.18) 



gdzie (Tp jest tuariancjq p^du czqstki, a pierujsza roujnosc ujynika z tego, ze p jest odchyleniem (fluk- 
tuacjq) p^du Yp od jego ujartosci oczekimanej 9p , (7.8). Podstaujiajqc potuyzszy ujynik do nieroiunosci 
Rao-Cramera, aj ■ If{(^) > 1, (7-3), otrzymujemy (7.1): 



(7.19) 



c.n.d. 
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7.2 Dodatek: Roirnanie Schrodingera 

Roujnania Schrodingera luyproiuadzimy jako nierelatytuistycznq granicQ roiunania Kleina-Gordo- 
na. Wyprotuadzenie go jako nierelatyujistycznej granicy roimania Diraca byioby merytorycznie bar- 
dziej uzasadnione [29], jednak celem ponizszego ruyproiuadzenia jest zujrocenie uujagi na relatyiui- 
styczne pochodzenie spinu elektronu. 

Rozpoczniemy od separacji zmiennych czasoruych i przestrzennych ujyst^pujqcych uj roxunaniu (4.56) 
dla pola rangi N = 2, zapisujqc po leiuej stronie ujszystkie ujyrazy zaujierajqce pochodnq czasoujq, a 
po pratuej pochodnq po ujspoirz^dnych przestrzennych: 

'c^h^V'^-2iech(^A-V^ -iech{v -A^ - - ij?c^^ , (7.20) 
gdzie skorzystano z ujyrazenia 

V . {^A^Ij^ ■ A + A-Vi) . (7.21) 

Nast^pnie skorzystajmy z nierelatyujistycznej reprezentacji funkcji falotuej [29]: 

V'(x,t)=V;(x,t)e-^'"^'*/\ (7.22) 

gdzie ujydzielilismy z ijj tuyraz zaujierajqcy energi^ spoczynkotuq mc?, otrzymujqc noujq funkcj^ fa- 
loujq V- Kolejnym krokiem jest zastosoujanie (7.22) uj (7.20). Rozniczkujqc (7.22) po czasie otrzymu- 
jemy: 

a po kolejnym rozniczkoujaniu: 

Stosujqc nierelatyujistyczne (n.r) przyblizenie: 
E 



n1 



« 1 , (7.25) 
gdzie En.r jest okreslone poprzez ponizsze zagadnienie ujiasne: 

-h'^^ = El,^, (7.26) 
mozemy pominqc piertuszy ujyraz po pratuej stronie (7.24). 

Odtuoiajmy si^ do przyblizenia staiego, siabego potencjaiu, dla ktorego zachodzi: 

e0 << m(? , (7.27) 



oraz 
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Nast^pnie, lustatuiajqc (7.23) oraz (7.24) do (7.20), i ujykorzystujqc (7.25), (7.27) oraz (7.28), otrzymujemy 
po przemnozeniu przez —l/2m(? i oznaczeniu jako Tp, roiunanie: 

■ ^ <9 , , , ^9 , ieh t ^ , ieh i\ , , ,„ 

- e0^A = -— + —A • VV' + 7^ V • A U + 2 ^ ■ ^-29 

at 2m mc Zmc \ J Znic^ 

Jest to roujnanie Schodingera dla nierelatyujistycznej funkcji faloujej iJj z potencjaiem elektromagne- 
tycznym A oraz 0. 

W przypadku zeroiuania si^ cz^sci ujektoroujej potencjaiu A i dla niezeroxuego potencjaiu skalarnego 
(j), roujnanie to przyjmuje znanq postac: 

ih—ip = V V + e V • (7.30) 

at 2m 



Pytanie: Powiedz dlaczego powyisze wyprowadzenie rownania Schodingera z rownania Kleina- 
Gordona, swiadczy o relatywistycznym charakterze spinu elektronu? 
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7.3 Dodatek: Rezultaty EFI dla elektrodynamiki Maxirella oraz teorii grairi- 
tacji 

7.3.1 Dodatek: Pole cechovuania Maxujella 

Ponizej zaprezentujemy rezultat melody EFI otrzymany w zapisie Friedena-Soffera dla tuyprouja- 
dzenia roiunan Maxiuella (M). Punktem ujyjscia jest pojemnosc informacyjna (3.65): 

^ " ^ f dpn (x) dpn (x] 



Roztuazmy roiunania ruchu Maxiuella dla pola rangi = 4 z amplitude rzeczymistq qn, n = 1,2, 3, 4. 
Zakiadamy, ze pola cechoujania proporcjonalne do tych rzeczyujistych amplitud [8]: 

q,y(x) = a Ajy(x) , gdzie = n — 1 = 0, 1, 2, 3 , (7-31) 

gdzie a jest petunq staiq. 

Wykorzystujqc metryk^ Minkoujskiego {rf^), delinujemy amplitudy g'^(x) dualne do qu{^)'- 

3 3 

g'^(x) = ^r?-%(x)=a^r/^'^A^(x) = a^-(x) , gdzie = n - 1 = 0, 1, 2, 3 , (7.32) 

At=o ^l=o 

gdzie tuproxuadzono dualne pola cechotuania ^'^(x): 

3 

^''(x) = ^ r/'^^A^lx) , gdzie i/ = 0, 1, 2, 3 . (7.33) 

At=0 

Amplitudy qu{yi) sq zujiqzane z punktoujymi rozkiadami praujdopodobienstuja p„ (x) nast^pujqco: 

Pn (x) = pq^ (x) = g,,(x)g',,(x) = a^Ay{-K)A^{yi) , gdzie n - 1 = 0, 1, 2, 3 . (7.34) 

Widzimy uji^c, ze uj metodzie EFI dla elektrodynamiki Maxujella, indeks proby n staje si^ indeksem 
czasoprzestrzennym. Zatem postac pojemnosci informacyjnej musi uujzgl^dniac fakt dodatkoiuej es- 
tymacji uj kanaiach czasoprzestrzennych, przyjmujqc zgodnie z ogolnymi zaleceniami Rozdzialu 2.7.1, 
postac ujspoizmienniczq: 



^J.=o 

3 „ 3 



fj.=0-'^ u=0 



Dalej post^pujemy jak uj [8]. Stosujemy obie zasady informacyjne, strukturalnq (3.43) z k = 1/2 oraz 
ujariacyjnq (3.44): 

?+C + Kq = 0, gdzie K = l/2 oraz (5(g) (/ + Q) = , (7.36) 
ktore rozujiqzujemy samospojnie, ujraz z nalozonym dodatkoujo ujarunkiem Lorentza: 

d^.A^' = . (7.37) 
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Zgodnie z (7.35) oraz (7.32) pojemnosc informacyjna / jest nast^pujqca: 

Wiascilua postac informacji strukturalnej Q = Qm dla roujnan ruchu Maxujella, zostaia ujyprouja- 
dzona uj [8]. 

Warunki fizyczne: W celu otrzymania zarotuno Qm, jak i tuartosci k, muszq bye przyj^te petune 
fizyezne zaiozenia [8]. Po pierwsze jest to luarunek Lorentza, po drugie, petuna ujst^pna postac Qm. 
Po trzecie, ujymagane jest roujniez zaiozenie o braku dodatkoiuych zrodei pola elektromagnetycz- 
nego UJ przestrzeni tuolnej od czterotuektora prqdu j'^ = {cp,j ). 

Drugi z tych tuarunkotu, zapisany zgodnie z notacjq zatuartq w (4.7), ujyraza si? z^daniem nast^pujqcej 
faktoryzacji obserujoujanej informacji strukturalnej: 

a^A,A''<f^{A,{x)) = -A'-FM , (7-39) 

ktorajest nast^pnie ujykorzystana uj (7.36). Jezeli funkcja Fy{ju) speinia zaiozenie o zaleznosci jedynie 
od czteroujektora prqdu ju [8], tutedy z zasad informacyjnych metody EFl, (7.36), ujynika zaroxuno 
ujartosc ujspoiczynnika efektyujnosci n = 1/2, jak i rotunanie ciqgiosci strumienia d'^ jy = [43]. W 
efekcie informacja strukturalna dla rotunania Maxujella jest roujna [8]: 

3 

Q = Q,j^ -^a^ f d'^^j^ A^ . (7.40) 

W koncu, dla pojemnosci informacyjnej / jak uj (7.38) i informacji strukturalnej Q jak uj (7.40) oraz 
dla a = 2, metoda EFI daje ujektorouje roujnanie falouje uj cechoujaniu Lorentza: 

UA^" = {^^/c)f , (7.41) 

CO UJ konsekujencji proujadzi do znanej postaci roujnafi Maxujella dla pola magnetycznego i elek- 
trycznego [59, 8]. 

Podkreslmy, ze proporcjonalnosc qu{^) = aA^{'K) oraz ujarunek normalizacji: 

(1/4) [ d'^qli^) =Y,[ d'^Ali^) = 1 , (7.42) 

staujiajq pytanie o znaczenie lokalizacji fotonu oraz istnienie jego funkcji falotuej, ktore sq ostatnio 
mocno dyskutoujane uj literaturze dotycz^cej optyki. Dyskusja zaujarta uj [44] ujspiera gioujnie po- 
glqd, ktory staujia roujnania Maxujella na tych samych podstaujach co roujnanie Diraca uj sformu- 
ioujaniu pierujszej kujantyzacji. Fakt ten byl ujczesniej zauujazony uj pracy Sakurai [29]. Przyjmujqc 
interpretacj? funkcji faloujej fotonu jako majqcq te same podstaujy co ujyst^pujqca uj (4.23) funkcja 
falouja czqstek materialnych z masq m = , z trzeciego z poujyzszych Jizycznych warunkow mozna 
by zrezygnoujac [8]. 
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Zauiuazmy, ze normalizacja^ (7-42) czteropotencjaiu A,^ uzgadnia tuartosc staiej proporcjonalnosci^ 
a = 2 z martosciq N = 4 dla pola sujietlnego. 

Normalizacja (7.42), naiozona jako luarunek na roziuiqzanie roiunania (7.41), jest spojna z narzuceniem 
tuarunku poczqtkoiuego Cauchy'ego uje ujspoirz^dnej czasotuej (por. dyskusja w [8]). Gdy jednocze- 
snie we tuspoirz^dnych przestrzennych narzucony jest marunek Dirichlet'a (lub Neumann'a), lutedy 
te mieszane czasoujo-przestrzenne luarunki brzegoiue nie sq tuspoizmiennicze, co skutkuje tym, ze 
rozmiqzanie roiunania (7.41) nie jest ujspoizmiennicze. 

Jednakze tylko z mieszanymi ujarunkami brzegotuymi roziuiqzanie to jest jednoznaczne [61, 8], co dla 
metody EFI jest ujarunkiem koniecznym, gdyz jest ona metodq estymacji statystycznej. Fakt ten stoi 
w opozycji do przypadku, gdy ujarunek Dirichlet'a (lub Neumann'a) jest naiozony ujspoizmienniczo 
zaroujno uje ujspoirz^dnych przestrzennych jak i ujspoirz^dnej czasoujej, gdyz co praujda otrzymane 
rozujiqzanie jest ujtedy ujspoizmiennicze, jednak nie jest ono jednoznaczne. 

W Rozdziale 4.3.2 poujiedzielismy, ze transformacja Fouriera tujorzy rodzaj samosplqtania pomi^- 
dzy dujoma reprezentacjami, poiozenioujq i p^doujq, dla realizotuanych ujartosci zmiennych ukiadu 
ujyst^pujqcych uj / [8]. Strukturalna zasada informacyjna ujyjasnia to splqtanie, zachodzqce pomi^dzy 
p^doujymi stopniami sujobody, jako spoujodoujane masq ukiadu zgodnq z (4.20) lub (4.30). 
Rozujazmy bezmasoujq czqstk^, np. foton. Jesli uj zgodzie z poujyzszymi rozujazaniami dla pola Max- 
ujella, relacja (4.32) okreslajqca informacj^ Fouriera miaiaby bye speiniona dla czqstki o masie ?n = 
oraz dla amplitud interpretoiuanych zgodzie z (7.31) i (7.42) jako charakteryzujqcych foton, ujtedy 
roiuniez ze strony eksperymentu nalezaioby si^ spodzieujac zaroujno ujeryfikacji kujestii zujiqzanej 
z naturq funkcji faloujej fotonu [44] jak i sygnaturq metryki czasoprzestrzeni. W samej rzeczy, uj me- 
tryce czasoprzestrzeni Minkoujskiego (2.214), zgodnie z (4.30) jedyn^ mozliujosciq, aby czqstka byia 
bezmasouja, jest zachodzenie ujarunku E'^/c^ — = dla ujszystkich jej monochromatycznych, 
Fourieroujskich mod, o ile tylko mody te miaiyby posiadac fizycznq interpretacj^ dla czqstki bezma- 
soujej. Warunek ten oznaczaiby jednak, ze mody Fourieroujskie nie byiyby ze sobq splqtane [62] (uj 
przecituiehstiuie do tego co zachodzi dla czqstki masoujej) i uj zasadzie poujinna istniec mozliujosc 
dokonania detekcji kazdego indyujidualnego moda rozkiadu Fouriera. Zatem, jesli cz^stosc indyuji- 
dualnego moda Fouriera impulsu sujietlnego nie zostaiaby zarejestroujana, to mogioby to oznaczac, 
ze nie jest on obiektem fizycznym. Fakt ten mogiby doproujadzic do problemouj dla kujantoujej inter- 
pretacji fotonu, okreslonego jako fizyczna realizacja konkretnego Fourieroxuskiego moda. Problem ten 
zostai ostatnio zautuazony uj zuji^zku z przeprotuadzonymi eksperymentami optycznymi [44], z kto- 
rych ujynika, ze Fourieroujski rozkiad cz^stosci impulsu sujietlnego nie reprezentuje rzeczyujistych 
optycznych cz^stosci, co sugeruje, ze bye moze rzeczyujisty foton jest "ziarnem elektromagnetycznej 
substancji" nie posiadajqcym Fourieroujskiego przedstaujienia. [44, 40]. 

7.3.2 Dodatek: Metoda EFI dla teorii gravuitacji 

Ponizej przedstaiuimy jedynie gioujne ujyniki zujiqzane z konstrukcjq EFI dla teorii graujitacji. 
Wychodzqc z ogolnej postaci pojemnosci (3.65) i post^pujqc analogicznie jak potuyzej dla pola Ma- 

' Normalizacja czteropotencjaiu A„ zadana przez (7.42) do jednosci moglaby nie zachodzic [60]. Warunkiem koniecznym 
dla (x) jest, aby niezb^dne srednie mogly bye luyliczone. Poroiunaj tekst ponizej (3.4). 

^Otrzymanej inczesniej jako luynik uzgodnienia rezultatu metody EFI z rotunaniami Maxtuella. 
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xtuella przy definicji amplitud dualnych, otrzymujemy amplitudoujq postac dla pojemnosci informa- 
cyjnej metody EFI. Nast^pnie post^pujemy juz jak uj [8], gdzie zostaio podane tuyproiuadzenie sia- 
bej (tzn. faloujej) granicy roiunari ruchu Einsteina, dla przypadku pol z rangq = 10, a amplitudy 
g„(x) = gi/^(x) UJ liczbie dziesi^c, rzeczytuiste i symetryczne w indeksach i/, = 0, 1, 2, 3. Zatem, 
pojemnosci informacyjna jest nast^pujqca: 

"''^it'-^'-^. (-3) 



iy,ti=0 7=0 



gdzie amplitudy dualne majq postac g (x) = ^^^^g i] rf^qy^{yi). Rozuji^zujqc samospojne rouj- 
nania rozniczkouje obu zasad informacyjnych, strukturalnej i ujariacyjnej, ujraz z naiozonym ujarun- 
kiem Lorentza, Y^v=q d^q'^^ix) = 0, ktory redukuje ujspoiczynnik efektyujnosci do ujartosci k = 1/2, 
otrzymujemy nast^pujqcq postac informacji strukturalnej: 



Q = -8 I d^x-^ Yl V 



16 TT G „ . ,,,, 

— —T"'' - 2Ar/''^ 



(7.44) 



gdzie 

V(x) = L'^q,yf,{x) , (7.45) 

natomiast rj^fj, jest metrykq Minkoujskiego, G jest staiq gratuitacyjnq, T^^^ jest tensorem energii-p^du, 
A jest tzuj. staiq kosmologicznq, a staia L jest charakterystycznq skalq, na ktorej amplitudy h^^ sq 
usrednione. 

Rozujiqzanie metody EFI pojatuia si^ u; postaci rotunania falotuego dla amplitud /ii,^: 

^^'^f^ = ^^^^^''A' - 2 ^ ' (7-46) 

gdzie □ = ^21=0 '^'^ '^'^ ~ Yl^i u=o ^y^'^S^Sj/ jestoperatorem d'Alemberta. Rotunania (7.46) majq postac 
ujiasciujq dla roujnan ruchu u; granicy siabego pola, uj ogolnej teorii ujzgl^dnosci. Rezultatem EFI jest 
roujniez roujnanie ciqglosci strumienia, Y1^u=q d^T^ufii^) = 0, dla tensora T^^. 



Pozostaje pytanie o rozxui^zanie dla doujolnie silnego pola. Jedna z odpotuiedzi jest nast^pujqca. 
Ponieujaz ^hy^ jest jednoznaczn^ linioxuq aproksymacjq tensora rangi drugiej 2Ry^ — g^uR, gdzie 
RufM jest tensorem Ricci'ego [63], g^fi jest tensorem metrycznym, a R = Ylu=o zatem mozna by 
uznac, ze roujnanie Einsteina ujyiania si^ jako jedyne mozliuje, u; tym sensie, ze jego linearyzacj^ jest 
roujnanie falouje siabego pola (7.46) otrzymane u; EFI [8]. 

Jednakze postac rozujiqzania (7.46) metody EFI moglaby roujniez sugeroiuac innq selekcj^ przysziego 
modelu graujitacji. Otoz uj calym formalizmie EFI amplitudy sq podstatuq do definicji pola, a nie 
metryki czasoprzestrzeni. Zatem bardziej naturalnym luydaje si^ zinterpretoujanie h,yf^ jako pola gra- 
ujitacyjnego'^. Tak tui^c rotunanie (7.46) metody EFI dla graujitacji lezy blizej innej teorii graujitacji, 
nazyujanej "szczegolnq teoriq ujzgl^dnosci graujitacji", ktora proujadzi do efektyujnej teorii graujita- 
cji typu Logunov'a [42], co poprzez ujidoczny zujiqzek z teoriami cechoujania czyni jq "bogatszq" niz 
samq ogolnq teori^ ujzgl^dnosci. Problem statystycznego poroujnania obu teorii graujitacji jest kujestiq 
przysziych prac. 

nie tzm. metryki siabego pola pochodzqcej od liniomej cz^sci zaburzenia metryki. Metryka siabego pola ma postac; 

/ii^M = h„fj. - ^ri^„h, gdzie h = J2l,„=o v'^'^h^iv oraz = g^,^ - ry^,^, dla \h^j,^ \ « 1. 
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7.4 Dodatek: Informacyjny odpoiriednik drugiej zasady termodynamiki: 
Tirierdzenie / 



Niech proba b^dzie = l-tuymiarouja. Podobnie jak przechodzi si^ z (2.186) do (2.194) in celu 
otrzymania dyskretnej postaci informacji Fishera"^, tak mozna tez pokazac, ze mozna przejsc do jej 
nast^pujqcej dyskretnej postaci: 



n 2 



(7.49) 



Post^pujqc w sposob analogiczny jak uj przypadku ujyproujadzenia (2.199) z (2.194), otrzymujemy: 

= -7A2 {P (x) \p {x + Ax)) . (7.50) 
[Ax) 

Niech zmiana rozkiadu praiudopodobieristiua z p = p{x) w chiuili t do pAx = p{x + Ax) nast^puje 

na skutek inlinitezymalnej zmiany czasu o dt. Jesli uji^c dla rozkiadoiu p oraz entropia luzgl^dna 
speinia ujarunek: 

dt ° ' (^-^^^ 

ujtedy ze ujzgl^du na (7.50) informacja Fishera speinia iwarunek: 

^ < (7.52) 

nazyujny /-txuierdzeniem. Oznacza on, ze informacja Fishera Ip dla parametru 9 maleje monoto- 
nicznie z czasem. 

Uiuaga: Doujod (7.51) oraz faktu, ze relacja ta istotnie proujadzi do drugiej zasady termodynamiki 
UJ rozumienia tujierdzenia H, czyli douJod, ktory trzeba przeproujadzic dla entropii Shannona, mozna 
znalezc uj pracach na temat dynamiki ukiadouj otujartych [64] . 

Wproujadzenie tujierdzenia / jako majqcego zujiqzek z tujierdzeniem H jest jak ujidac nieprzypad- 
kouje. Ale roujniez nieprzypadkouje jest podobiehstujo dziaiajqce uj drugq strong. A mianoujicie, po- 
jemnosc informacja jest zujiqzana z rangq pola N, co bylo ujidoczne uj calej tresci skryptu. W istniejq- 
cej literaturze mozna znalezc ujyproujadzenia pokazujqce, ze istnieje entropijny odpoujiednik zasady 
nieoznaczonosci Heisenberga, oraz zujiqzek informacji Shannona z ujymiarem reprezentacji grupy 
obrotouj dla pol fermionotuych rangi N. 



*Pojemnosc informacyjna (3.65) dla A'^ = 1 i skalarnego parametru mynosi: 

/.= /d.4^f%^y , (7.47) 
J pe{x) \ dx J 

i jest to informacja Fishera parametru 6, gdzie informacja o parametrze 9 pozostaujiono uj indeksie rozkiadu. Interesujqcy 
zuji^zek informacji Fishera z entropiq KuUbacka-Leiblera pojaujia siq na skutek zmiany rozkiadu zmiennej losoujej spoujo- 
doujanego nie zmianq parametru rozkiadu, ale zmianq ujartosci x na a; + Aa;. Zast^pmy uji^c (7.47) sumq Riemanna (7.49) 
i ujprouiadzmy uiielkosc: 

5,^^M£il±M_i. (7.48) 

Post^puj^c dalej podobnie jak przy przejsciu od (2.195) do (2.199) (tyle, ze teraz rozkiady rozni^ si§ z pouiodu zmiany 
uiartosci fluktuacji x), otrzymujemy (7.50). 
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7.4.1 Dodatek: Temperatura Fishera 

Jako kolejnq ilustracj^ nieprzypadkoiuego podobienstiua rachunkoiu informacyjnych i entropij- 
nych roztuazmy definicj^ temperatury Fishera dla parametru 9. Otoz, informacja Fishera parametru 
6 pozruala na zdelinioujanie temperatury Fishera Tq zruiqzanej z estymacjq tego parametru: 

Tak okreslona temperatura jest miarq czuiosci informacji Fishera na zmian^ parametru 9, podobnie 
jak temperatura Bokzmanna T (dla ktorej zachodzi = jest miarq czuiosci entropii Boltzmanna 
Hb na zmian^ energii E ukiadu. Temperatura Fishera znalazia sujoje zastosotuanie mi^dzy innymi 
uj badaniu rynkouj linansoujych [65, 66]. 
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